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züglich seines fachlich-konzeptuellen Eindrucks (Codierung des zweiten Segments mit 
Subsubsubkategorie 3.0.1.1 und 3.0.3.1). 


Bei diesen 36 Fundstellen zeigte sich, dass sich diese entweder auf Schülerlösungstext A 
oder C bezogen, also auf diejenigen Schülerlösungstexte, die gemäß der Vorauswahl in der 
Entwicklungsstudie eine hohe fachlich-konzeptuelle Qualität aufweisen (zur Illustration 
vgl. Tabelle 6.21 und 6.22; für die Teilnehmer innen mit mehreren Fundstellen ist in Ta- 
belle 6.21 bzw. 6.22 jeweils die für alle Fundstellen am ehesten repräsentative dargestellt). 
Wie aus Tabelle 6.20 ferner hervorgeht, handelt es sich bei den benannten 36 Fundstellen 
um die einzigen, die in den Laut-Denk-Protokollen mehrerer Lehrkräfte mehrfach auffind- 
bar waren. Diese 36 Fundstellen ließen sich daher fallübergreifend miteinander vergleichen. 
Hierdurch konnten die folgenden drei Muster identifiziert werden, wobei insbesondere die 
mit den Nummern (2a) und (2c) versehenen Muster einen Hinweis auf eine Konfundierung 
fachlich-konzeptueller und sprachlicher Leistungsurteile darstellen: 


253 


6. Hauptstudie 


Äußerung zum/zur... 
(Art der Äußerung) 


fachlich-konzeptuellen Eindruck 
(negativ wertend/ablehnend) 
sprachlichen Realisierung 
(negativ wertend/ablehnend) 
fachlich-konzeptuellen Eindruck 
(positiv vvertend /akzeptierend) 
sprachlichen Realisierung 


(negativ wertend/ablehnend) 


fachlich-konzeptuellen Eindruck 


(negativ wertend/ablehnend) 
sprachlichen Realisierung 
(positiv vvertend /akzeptierend) 
fachlich-konzeptuellen Findruck 
(positiv vvertend /akzeptierend) 
sprachlichen Realisierung 
(positiv wertend/akzeptierend) 
fachlich-konzeptuellen Eindruck 
(neutral/gemischt/sonstig) 
sprachlichen Realisierung 


(positiv vvertend /akzeptierend) 


fachlich-konzeptuellen Findruck 


(neutral/ gemischt /sonstig) 


sprachlichen Realisierung 


(negativ wertend/ablehnend) 


fachlich-konzeptuellen Findruck 
(positiv vvertend /akzeptierend) 
sprachlichen Realisierung 
(neutral/ gemischt /sonstig) 
fachlich-konzeptuellen Findruck 
(negativ wertend/ablehnend) 
sprachlichen Realisierung 
(neutral/gemischt /sonstig) 
fachlich-konzeptuellen Eindruck 
(neutral/gemischt /sonstig) 


rachlichen Realisierung 


ral/gemischt /sonstig) 


nehmer _ 


277 
“üş fach 
(n 


557 
Tt 


o 
"lr fach 
(n 


o... 


Äußerung zum/zur... 
(Art der Äußerung) 


sprachlichen Realisierung 


gativ wertend/ablehnend) 


ich-konzeptuellen Eindruck 


egativ wertend/ablehnend) 


sprachlichen Realisierung 


gativ wertend/ablehnend) 
ich-konzeptuellen Eindruck 


sitiv wertend/akzeptierend) 


sprachlichen Realisierung 


sitiv wertend/akzeptierend) 
ich-konzeptuellen Eindruck 


egativ wertend/ablehnend) 


sprachlichen Realisierung 


(positiv wertend/akzeptierend) 


ich-konzeptuellen Eindruck 


“üb fachli i 
(positiv wertend/akzeptierend) 

757 sprachliche: alisierung 
(positiv wertend/akzeptierend) 


“üb 


k oo) 
"üş 


2. 


prachlichen Realisierung 


onzeptuellen Eindruck 


ral/gemischt/sonstig) 


sprachlichen Realisierung 


gativ wertend/ablehnend) 
onzeptuellen Eindruck 
ral/gemischt/sonstig) 
chlichen Realisierung 
al/gemischt/sonstig) 


ich-konzeptuellen Eindruck 


“əl fachli i 
(positiv wertend/akzeptierend) 


77 


chlichen Realisierung 
ral/ gemischt /sonstig) 


ich-konzeptuellen Eindruck 


Tat fach 2 
(negativ wertend/ablehnend) 


157 


“hlichen Realisierung 


al/gemischt/sonstig) 


ich-konzeptuellen Eindruck 


“üş fachli i 
(neutral/ gemischt /sonstig) 


Tabelle 6.20.: Anzahl der unmittelbaren VVechsel in den Laut-Denk-Protokollen der Teil- 


Lehrkrafte mit 
mindestens einer 
Fundstelle 


Anzahl aller 
Fundstellen 


C, E, G, K, M,P, 


Lehrkrafte 
mit mehreren 
Fundstelle 


innen zwischen dem Feststellen und Beurteilen des fachlich-kon- 


zeptuellen Eindrucks eines Schülerlösungstextes und dem Feststellen und 
Beurteilen seiner sprachlichen Realisierung, differenziert nach Art der 
Äußerung. 


Muster in den Fundstellen, in denen einer positiv wertenden/akzeptierenden 


Äußerung zum fachlich-konzeptuellen Eindruck eines Schülerlösungstextes ei- 


ne negativ wertende/ablehnende Äußerung zur sprachlichen Realisierung folgt 


(vgl. Tabelle 6.21) 


(2a) Es gibt Fundstellen, in denen dem der Verfasser in von Schülerlösungstext A oder 


C zunächst zugestanden wird, fachlich-konzeptuell die Aufgabe Weltraumspazier- 
gang bzw. Teile dieser gelöst zu haben (in Tabelle 6.21: Herr Carboni, Seg. 239-240, 


254 


(2b) 


6. Hauptstudie 


391-392: Herr Dassow, Seg. 262-263, Seg. 390-391; Herr Geppert 9, Seg. 452-454: 
Herr Jonuzi, Seg. 185-186; Frau Kirik, Seg. 240-241: Herr Quezada, Seg. 176-177; 
Frau Sohm, Seg. 151-152). Zum Teil ist dieses Zugestandnis eher widerwillig, da es 
zugleich negativ konnotiert ist und/oder sprachlich relativiert wird (z. B. , İmlir ist 
zwar (.) klar, was der Schüler meint“ (Herr Carboni, Seg. 236) oder ,İilm Grunde 
ist es ja richtig“ (Frau Kirik, Seg. 424)). Diesem Zugeständnis wird anschließend 
entweder eine global formulierte, negativ wertende/ablehnende Äußerung bezüglich 
der sprachlichen Realisierung des Schülerlösungstextes (z. B. „aber natürlich (.) ist 
das von der Formulierung her nicht wirklich das, mhm was man von äh ihm oder 
ihr erwartet“ (Herr Carboni, Seg. 240)) oder das Fehlen bestimmter Fachbegriffe 
als Gegensatz gegenübergestellt (z. B. „wobei der Fachbegriff [Medium; M. S. F.] 
auch da nich- genannt wurde“ (Herr Dassow, Seg. 263)). Hier deutet sich also die 
Bewertungslogik an, fachlich-konzeptuell richtige oder anschlussfähige Denkfiguren 
in einem Schülerlösungstext zu relativieren, wenn in diesem Schülerlösungstext die 
Sprachgebrauchserwartung einer Lehrkraft nicht hinreichend erfüllt wurde. 


Es gibt weitere Fundstellen, in denen dem der Verfasser in von Schülerlösungs- 
text A oder C ebenfalls zunächst (eher widerwillig) zugestanden wird, fachlich- 
konzeptuell die Aufgabe Weltraumspaziergang bzw. Teile dieser gelöst zu haben (in 
Tabelle 6.21: Herr Balke, Seg. 149-150; Herr Hastedt, Seg. 282-283; Frau Novack, 
Seg. 240-241, Seg. 492-493; Herr Rittershaus, Seg. 276-277; Frau Sohm, Seg. 272-273; 
Herr Trummer, Seg. 435-436, 376-377; Herr Uckermark, Seg. 339-340). Die sich an- 
schließende negativ wertende/ablehnende Äußerung zur sprachlichen Realisierung 
des Schülerlösungstextes wird allerdings von diesem Zugeständnis abgegrenzt, sie 
wird einräumend untergeordnet, sowie zum Teil auch relativiert (z. B. „also nur’n 
bisschen komisch ausgedückt“ (Herr Balke, Seg. 150) oder , laluch wenn die Fach- 
sprache [...] ganz schlecht ist“ (Herr Uckermark, Seg. 340)). Hier deutet sich daher 
die Bewertungslogik an, fachlich-konzeptuelle Merkmale von Merkmalen der sprach- 
lichen Realisierung zu trennen und sprachliche Merkmale eines Schülerlösungstextes 
zu relativieren, wenn die Feststellung und Beurteilung fachlich-konzeptueller Merk- 
male momentan im Vordergrund steht. 


Muster in den Fundstellen, in denen einer negativ wertenden/ablehnenden 


Äußerung zur sprachlichen Realisierung eines Schülerlösungstextes eine po- 
sitiv wertende/akzeptierende Äußerung zum fachlich-konzeptuellen Eindruck 
folgt (vgl. Tabelle 6.22) 


(2c) 


In den Fundstellen, die mit einer negativ wertenden/ablehnenden Äußerung zur 
sprachlichen Realisierung von Schülerlösungstext A oder C beginnen, wird zunächst 
hervorgehoben, dass bestimmte Aspekte ihrer sprachlichen Realisierung nicht den 


43Tm Laut-Denk-Protokoll von Herrn Geppert trat die Besonderheit auf, dass eine negativ werten- 
de/ablehnende Äußerung zur sprachlichen Realisierung von Schülerlösungstext A eine positiv wertende 
Äußerung bezüglich seines fachlich-konzeptuellen Eindruck folgte, die wiederum von einer negativ wer- 
tenden/ablehnenden Äußerung zur seiner sprachlichen Realisierung gefolgt wurde. In Ihrer Gesamtheit 
sind diese drei aufeinanderfolgenden Transkriptsegmente am besten dem Muster (2a) zuordenbar. 
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eigenen Erwartungen genügen (z. B. „es fehlt eben die Fachsprache“ (Frau Kirik, 
Seg. 430)). Zum Teil werden diese Erwartungen relativiert („[z]war nich- mein[e] äh 
speziellen Fachwörter“ (Frau Novack, Seg. 493) oder „vom Aufbau her -n bisschen 
merkwürdich“ (Herr Trummer, Seg. 286)). Insbesondere wird der negativ werten- 
den/ablehnenden Äußerung zur sprachlichen Realisierung — außer in der Fundstelle 
im Laut-Denk-Protokoll von Herrn Geppert!?? — eine (global formulierte) positiv 
wertende/akzeptierende Äußerung zum fachlich-konzeptuellen Eindruck als Gegen- 
satz gegenübergestellt (z. B. „[alber im All ist nichts das ist ja sowas wie Vakuum.“ 
(Frau Kirik, Seg. 431) oder „obwohl sie ja schon äh das Ganze schon ganz gut er- 
klärt hat“ (Herr Dassow, Seg. 396)). Hier deutet sich daher die Bewertungslogik an, 
sprachliche Mängel eines Schülerlösungstextes zu relativieren, wenn in diesem die 
fachlich-konzeptuellen Erwartungen der Lehrkraft (in Teilen) erfüllt wurden. 


6.3.2.4.4. Limitation und Zwischenfazit 

In Phase 2b konnten verschiedene Muster in den Laut-Denk-Protokollen identifiziert wer- 
den. Bei diesen Mustern handelt es sich um qualitative Prozessaspekte, die sich als unter- 
schiedliche Bewertungslogiken der Teilnehmer _ innen bei ihrer laut-denkenden Korrektur 
der Schülerlösungstexte interpretieren lassen. Zentrale Befunde sind... 


... die Tendenz zur Defizitorientierung bei der Feststellung und Beurteilung der sprach- 
lichen Realisierung der Schülerlösungstexte (Muster (la) bis (1d)). 


.. die Konfundierung fachlich-konzeptueller und sprachlicher Leistungsurteile (Bewer- 
tungslogik einer Relativierung des fachlich-konzeptuellen Eindrucks, aufgrund der 
sprachlichen Realisierung bzw. umgekehrt; Muster (2a) und (2c)). 


.. die Bewertungslogik einer Trennung fachlich-konzeptueller und sprachlicher Leistungs- 
urteile (Muster (2b)). 


Anzumerken ist, dass sich an dieser Stelle der vorliegenden Arbeite keine Aussagen darüber 
treffen lassen, ob die in den Laut-Denk-Protokollen identifizierten Muster im gesamten 
Leistungsurteilsgeneseprozess der Teilnehmer _innen auch eine tragende Rolle eingenom- 
men haben. Grund hierfür ist, dass die Dokumenten-Portraits, die als Grundlage für die 
in Phase 2b vorgenommene Analyse dienten, lediglich ein verjüngtes (und damit nicht 
vollständiges) Abbild des chronologischen Verlaufs ausgewählter Gedankenfolgen darstel- 
len, die die Teilnehmer _ innen im Rahmen der Laborsituation laut-denkend mitvokalisiert 
haben. 
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Feintranskript mit Segementierung 
(negativ wertende/ablehnende Äußerung zur sprachlichen Realisierung eines Schülerlösungstextes gefolgt von einer positiv wertenden/akzeptierenden Äußerung zur seinem fachlich- 
Lehrkraft konzeptuellen Eindruck) 
Schülerlösungstext A Schülerlösungstext C 
Herr Ne, des is- ja (.) die sprachliche Unklarheiten. [395] Ähm würde da jetz- f- mhm noch fehlen [Begriff Medium, M. S. F], 


Dassow Er meint allerdings das richtige. [396] obwohl sie ja schon äh das Ganze schon ganz gut erklärt hat. 


Herr Is- auch wieder dieses Ton. 
Geppert Also generell (.) würd- ich hier sagen, der Schüler hat das Phänomen... 


also e-... er kennt die Erklärung. 
Frau (..) Na ja, also diese Begründung ist... es fehlt eben die Fachsprache. 
Kirik Aber im All ist nichts das ist ja sowas wie Vakuum. 


Frau (.) Zwar nich- mit mein äh speziellen Fachworten, die ich i 
Novack (.) im Erwartungshorizont benutzt habe. 
Aber inhaltlich damit (.) ähm meines Erachtens voll erfasst. 


Herr Na £.) gut, so jetz- von -ner... vom Aufbau her -n bisschen 
Trummer merkwürdich. 
Aber man weiß was gemeint is-. 


Tabelle 6.22.: Ausgewählte Fundstellen aus den Laut-Denk-Protokollen für eine negativ wertende/ablehnende Äußerung zur sprachli- 
chen Realisierung eines Schülerlösungstextes gefolgt von einer positiv wertenden /akzeptierenden Äußerung zur seinem 
fachlich-konzeptuellen Eindruck. 
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6.3.2.5. Phase 2c: Quantitative Analyse ausgewahlter inhaltlicher Facetten der 
Laut-Denk-Protokolle144 


6.3.2.5.1. Methodische Vorbemerkungen 

Ziel von Phase 2c der inhaltsanalytischen Auswertung der Laut-Denk-Protokolle war eine 
vertiefte Beschreibung und Interpretation ausgewählter inhaltlicher Facetten der Laut- 
Denk-Protokolle aller Teilnehmer innen. Dies geschah mittels einer quantitativen Ana- 
İyse der Codierhäufigkeiten besonders reichhaltiger (Subsubsub-)Kategorien des Kate- 
goriensystems aus Phase 1. Grundlage für diese Analyse bildeten die Segmente in den 
Laut-Denk-Protokollen, die der Subkategorie „Feststellung und Beurteilung eines Schü- 
lerlösungstextes“ (Subkategorie 3.0) zugewiesen wurden. Grund hierfür ist, dass diese 
Segmente insgesamt mit vier verschiedenen (Subsubsub-)Kategorien codiert wurden!® 
und somit — wie in Phase 2b bereits auf qualitativer Ebene geschehen — die Suche nach 
auffälligen Muster bei verschiedensten Codingkombinationen ermöglichten. Die zentralen 
Schritte, durch welche die Codierung dieser Segmente aufbereitet und mit Hilfe nicht- 
parametrischer statistischer Methoden analysiert wurden, lassen sich wie folgt zusam- 
menfassen: 


e Erstens wurden für jedes der 21 Laut-Denk-Protokolle die absoluten Häufigkeiten 
der Segmente bestimmt,... 


(a) ... die mit der Kategorie „Auseinandersetzung mit Schülerlösungstext A“, „B“, 
„C“ oder „D“ und zusätzlich mit den Subsubsubkategorien der Subsubkategorie 
3.0.1 (fokussiertes Merkmal) codiert wurden. 


(3) ... die mit der Kategorie „Auseinandersetzung mit Schülerlösungstext A“, „B“, 
„C“ oder „D“ und zusätzlich mit den Subsubsubkategorien der Subsubkategorie 
3.0.2 (Bezug der Verortung) codiert wurden. 


(y) ... die mit der Kategorie „Auseinandersetzung mit Schülerlösungstext A“, „B“, 
„C“ oder „D“ und zusätzlich mit den Subsubsubkategorien der Subsubkategorie 
3.0.3 (Art der Äußerung) codiert wurden. 


(ó) ... die mit den Subsubsubkategorien der Subsubkategorie 3.0.1 (fokussiertes 
Merkmal) und zusätzlich mit denen der Subsubkategorie 3.0.2 (Bezug der Ver- 
ortung) codiert wurden. 


(€) ... die mit den Subsubsubkategorien der Subsubkategorie 3.0.1 (fokussiertes 
Merkmal) und zusätzlich mit denen der Subsubkategorie 3.0.3 (Art der Äu- 
Berung) codiert wurden. 


144 Teile dieses Abschnitts stellen eine überarbeitete und erweiterte Fassung von Feser & Höttecke (2019), 
sowie Feser & Höttecke (im Druck) dar. 

145 Jedem dieser Segment wurde aus jeder der Subsubkategorien 3.0.1, 3.0.2 und 3.0.3 jeweils genau 
eine Subsubsubkategorie zugewiesen, sowie eine der zusätzlichen Kategorien „Auseinandersetzung 
mit Schülerlösungstext A“, „Auseinandersetzung mit Schülerlösungstext B“, „Auseinandersetzung 
mit Schülerlösungstext C“ oder „Auseinandersetzung mit Schülerlösungstext D“ (vgl. Unterabschnitt 
6.3.2.2). 
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(C) ... die mit den Subsubsubkategorien der Subsubkategorie 3.0.2 (Bezug der Ver- 
ortung) und zusätzlich mit denen der Subsubkategorie 3.0.3 (Art der Äußerung) 
codiert wurden. 


e Zweitens wurde jede dieser absoluten Haufigkeiten von Codingkombinationen pro 
Laut-Denk-Protokoll in geeignete prozentuelle Häufigkeiten umgewandelt (Details 
siehe Ergebnisdarstellung). Diese Umwandlungen waren notwendig, da sich die Laut- 
Denk-Protokolle der Teilnehmer innen bezüglich ihrer Segmentgesamtanzahl zum 
Teil deutlich voneinander unterscheiden (vgl. Tabelle 6.4) und daher eine fallüber- 
greifende Analyse der absoluten Haufigkeiten von Codingkombinationen nicht mög- 
lich war. 


e Drittens wurden der Stichprobenmedian und der Interquartilsabstand als Lage- bzw. 
Streuungsmaß für die prozentuellen Häufigkeiten jeder dieser Codingkombinationen 
bestimmt. 


e Viertens wurden 2-seitige Wilcoxon-Vorzeichen-Rang-Test durchgeführt, sowie das 
Effektstärkemaß ES berechnet (vgl. auch Abschnitt 6.3.1). Dies geschah, um dar- 
über Auskunft zu erhalten, bei welchen Codingkombinationen, die inhaltlich sinnvoll 
miteinander vergleichbar sind (Details siehe Ergebnisdarstellung), sich deren Media- 
ne signifikant voneinander unterscheiden und wie stark diese Unterschiede sind. Bei 
allen durchgeführten Tests wurde das Signifikanzniveau o = .05 gewählt. 


e Fünftens wurden die in den vorherigen Schritten gewonnenen statistischen Kenn- 
werte für die einzelnen Codingkombination-Häufigkeiten nach Auffälligkeiten durch- 
sucht, sowie diese im Sinne von Forschungsfrage (F1) und (F2) interpretiert. 


Die Ergebnisse, die durch die eben beschriebene Verfahrensweise gewonnenen wurden, 
werden im Folgenden dargestellt. 


6.3.2.5.2. Quantitative Analyse der medianen prozentuellen Häufigkeiten der Seg- 
mente, die mit der Kategorie „Auseinandersetzung mit Schülerlösungstext A“, „B“, 
„C“ oder „D“ und zusätzlich mit den Subsubsubkategorien der Subsubkategorie 
3.0.1 (fokussiertes Merkmal) codiert wurden 

In Tabelle 6.23 sind für die Häufigkeiten der Segmente, die mit der Kategorie „Ausein- 
andersetzung mit Schülerlösungstext A“, „B“, „C“ oder „D“ und zusätzlich mit den Sub- 
subsubkategorien der Subsubkategorie 3.0.1 (fokussiertes Merkmal) codiert wurden, die 
Ergebnisse der in Phase 2c vorgenommenen Aufbereitung und Analyse zusammengefasst. 
Tabelle 6.23 ist dabei wie folgt zu lesen: 


1. In die Tabellendiagonale sind die Stichprobenmediane (die Interquartilsabstän- 
de) für die prozentuellen Häufigkeiten der einzelnen Codingkombinationen einge- 
tragen. Zum Beispiel bedeutet der Eintrag am linken Ende der Tabellendiagona- 
len, dass von den Segmenten, die je Laut-Denk-Protokoll mit Kategorie „A“ codiert 


wurden, im Median 37.2 % zusätzlich mit Subsubsubkategorie 3.0.1.1 (Fokussierung 


des fachlich-konzeptuellen Findrucks) codiert wurden, sowie dass der Interquartils- 
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abstand der pronzentuellen Haufigkeit dieser Codingkombination 23.1 % betragt. 
Für die übrigen Einträge in der Tabellendiagonalen gilt Analoges. 


Unterhalb der Tabellendiagonalen ist für die prozentuellen Häufigkeiten der 
Codingkombinationen, die inhaltlich sinnvoll miteinander vergleichbar sind, das Ef- 
fektstärkemaß ES als Kennwert für das Ausmaß des Medianunterschieds der jeweili- 
gen Codingkombinationen angegeben, sowie ob es sich hierbei um einen signifikanten 
Unterschied handelt (Ergebnis des entsprechenden 2-seitigen Wilcoxon-Vorzeichen- 
Rang-Tests). Zum Beispiel bedeutet der in der ersten Spalte von Tabelle 6.23 von 
oben gezählt... 


.. zweite Eintrag, dass sich zwischen den prozentuellen Häufigkeiten der Coding- 
kombination aus Kategorie „A“ und Subsubsubkategorie 3.0.1.1 (Fokussierung 
des fachlich-konzeptuellen Eindrucks), sowie der Codingkombination aus Katego- 
rie „A“ und Subsubsubkategorie 3.0.1.2 (Fokussierung der sprachlichen Reali- 
sierung) ein schwacher, statistisch nicht signifikanter Medianunterschied zeigt 
(ES = .29; p > .05). 


.. fünfte Eintrag, dass sich zwischen den prozentuellen Häufigkeiten der Coding- 
kombination aus Kategorie „A“ und Subsubsubkategorie 3.0.1.1 (Fokussierung 
des fachlich-konzeptuellen Eindrucks), sowie der Codingkombination aus Katego- 
rie „B“ und Subsubsubkategorie 3.0.1.1 (Fokussierung des fachlich-konzeptuellen 


Eindrucks) ein starker, statistisch signifikanter Medianunterschied zeigt (ES = 
.58: p < .001). 


Für die übrigen Einträge unterhalb der Tabellendiagonalen gilt Analoges. 


Auffälligkeiten in den deskriptiven Kennwerten und Ergebnissen der Wilcoxon- 


Vorzeichen-Rang-Tests 


In den in Tabelle 6.23 aufgeführten Kennwerten zeigen sich die folgenden Auffälligkeiten: 


(a1) 


Bei Schülerlösungstext A wurden von den Teilnehmer __innen der fachlich-konzeptu- 
elle Eindruck, die sprachliche Realisierung, sowie mehrere/uneindeutige Merkmale 
im Median in vergleichbarer Häufigkeit herangezogen. Zwischen der prozentuellen 
Häufigkeit dieser Merkmalsfoki zeigt sich jeweils kein statistisch signifikanter Me- 
dianunterschied. Sonstige Merkmale spielten hingegen mit einer medianen prozentu- 
ellen Häufigkeit von 0.0 % de facto keine Rolle. Ferner zeigt sich zwischen sonstigen 
Merkmalen und den übrigen codierten Merkmalsfoki jeweils ein starker, statistisch 
signifikanter Medianunterschied (.60 < ES < .62). 


Bei Schülerlösungstext B wurde von den Teilnehmer innen im Median am häufigs- 
ten der fachlich-konzeptuelle Findruck herangezogen (Median = 66.7 76). Zwischen 
dem fachlich-konzeptuellen Eindruck und den übrigen codierten Merkmalsfoki zeigt 
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mehrere 

mehrere 

mehrere 
mehrere 


sonstig 
(3.0.1.3) 
mehrere 
(3.0.1.4) 


Sprache 
(3.0.1.2) 
sonstig 
(3.0.1.3) 
mehrere 
(3.0.1.4) 


.62F”F 


sonstig .53*** 
(8.0.1.3) 
mehrere 
(3.0.1.4) 


sonstig 
(3.0.1.3) 
mehrere 
(3.0.1.4) 


Tabelle 6.23.: Zusammenfassung der Lageparameter-Analyse für die prozentuellen Haufigkeiten der Segmente, die mit der Katego- 
rie „Auseinandersetzung mit Schülerlösungstext A“, „B“, „C“ oder „D“ und zusätzlich mit den Subsubsubkategorien 
der Subsubkategorie 3.0.1 (fokussiertes Merkmal) codiert wurden. Kennwerte in der Tabellendiagonalen: Median (In- 
terquartilsabstand) der jeweiligen Codingkombination. Kennwerte unterhalb der Tabellendiagonalen: Fffektstärkemaß 
ES fir den Medianunterschied der jeweiligen Codingkombinationen (***:p < .001; **:p < .01; *:p < .05; 2-seitiger 
VVilcoxon-Vorzeichen-Rang-Test). 
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sich jeweils ein starker, statistisch signifikanter Medianunterschied (.60 < ES < 
.62). Dem fachlich-konzeptuellen Eindruck folgen mehrere/uneindeutige Merkmale 
mit einer medianen prozentuellen Hàufigkeit von 21.4 %. Die sprachliche Realisie- 
rung, sowie sonstige Merkmale spielten hingegen mit einer medianen prozentuellen 
Häufigkeit von jeweils 0.0 % de facto keine Rolle. 


Bei Schülerlösungstext C wurde von den Teilnehmer_innen vor allem entweder 
der fachlich-konzeptuelle Eindruck (Median = 35.9 %), oder mehrere/uneindeutige 
Merkmale herangezogen (Median = 37.1 %). Zwischen der prozentuellen Häufigkeit 
dieser Merkmalsfoki zeigt sich kein statistisch signifikanter Medianunterschied; zu 
den übrigen codierten Merkmalsfoki zeigt sich jeweils ein moderat bis starker, statis- 
tisch signifikanter Medianunterschied (.37 < ES < .61). Diesen beiden Merkmalsfo- 
ki folgen die sprachliche Realisierung mit einer medianen prozentuellen Häufigkeit 
von 18.9 %, sowie sonstige Merkmale mit einer medianen prozentuellen Häufigkeit 
von 8.1 %. Zwischen der prozentuellen Häufigkeit der beiden zuletzt genannten 
Merkmalsfoki zeigt sich zudem ein moderater, statistisch signifikanter Medianun- 
terschied (ES = .44). 


Bei Schülerlösungstext D zeigt sich zwischen den prozentuellen Häufigkeiten aller 
codierten Merkmalsfoki ein moderater bis starker, statistisch signifikanter Median- 
unterschied (.36 < ES < .62). Der fachlich-konzeptuelle Eindruck wurde dabei mit 
einer medianen prozentuellen Häufigkeit von 52.4 % am häufigsten für die Leis- 
tungsurteilsgenese herangezogen. Dem folgen in absteigender Reihenfolge mehre- 
re/uneindeutige Merkmale (Median = 28.1 %), die sprachliche Realisierung (Median 
= 11.1 %) und sonstige Merkmale (Median = 0.0 %). 


Der fachlich-konzeptuelle Eindruck wurde von den Teilnehmer _ innen bei Schülerlö- 
sungstext B im Median am häufigsten fokussiert (Median = 66.7 %). Zu der prozen- 
tuellen Häufigkeit, in der der fachlich-konzeptuelle Eindruck bei den Schülerlösungs- 
texten A, C und D fokussiert wurde, zeigt sich jeweils ein starker, statistisch signi- 
fikanter Medianunterschied (.58 < ES < .62). Am seltensten wurde der fachlich- 
konzeptuelle Eindruck bei Schülerlösungstext A und C fokussiert (Median Schüler- 
lösungstext A = 37.2 %; Median Schülerlösungstext C = 35.9 %; kein statistisch 
signifikanter Medianunterschied). Diesbezüglich im Mittelfeld liegt Schülerlösungs- 
text D (Median 52.4 %), mit einem moderaten bis starken, statistisch signifikanten 
Medianunterschied zu den Schülerlösungstexten A, B und C (34 < ES < .59). 


Die sprachliche Realisierung wurde von den Teilnehmer innen bei Schülerlösungs- 
text A im Median am häufigsten fokussiert (Median = 19.1 %). Zu der prozentuellen 
Häufigkeit, mit der die sprachliche Realisierung bei den Schülerlösungstexten B, C 
und D fokussiert wurde, zeigt sich jeweils ein moderater bis starker, statistisch signi- 
fikanter Medianunterschied (.31 < ES < .62). Am seltensten wurde die sprachliche 
Realisierung bei Schülerlösungstext B fokussiert (Median = 0.0 %; jeweils ein star- 
ker, statistisch signifikanter Medianunterschied zu den Schülerlösungstexten A, C 
und D). Diesbezüglich im Mittelfeld liegen Schülerlösungstext C und D (Median 
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(a8) 


Sehülerlösungstext C = 18.9 %; Median Schülerlösungstext D = 11.1 %; kein sta- 
tistisch signifikanter Medianunterschied). 


Sonstige Merkmale wurden von den Teilnehmer innen im Median lediglich bei Schü- 
lerlösungstext C fokussiert (Median = 8.1 %). Zu der prozentuellen Häufigkeit, in 
der sonstige Merkmale bei den Schülerlösungstexten A, B und D fokussiert wurden, 
zeigt sich jeweils ein moderater bis starker, statistisch signifikanter Medianunter- 
schied (.32 < ES < .53). Bei den übrigen drei Schülerlösungstexten spielten sons- 
tige Merkmale mit einer medianen prozentuellen Häufigkeit 0.0 % de facto keine 
Rolle. Der signifikante Ausgang des Wilcoxon-Vorzeichen-Rang-Tests zwischen den 
prozentuellen Häufigkeiten, in denen sonstige Merkmale bei Schülerlösungstext A 
und B fokussiert wurden, lässt sich auf den entsprechenden Streuungsunterschied 
zwischen diesen beiden Schülerlösungstexten zurückführen (IQR Schülerlösungstext 
A = 5.3 %; IQR Schülerlösungstext B = 0.0 %). Analoges gilt für Schülerlösungstext 
B und D, bei denen der entsprechende Wilcoxon-Vorzeichen-Rang-Tests allerdings 
einen knapp nicht signifikanten Ausgang hatte (p = .063). 


Mehrere/Uneindeutige Merkmale wurden von den Teilnehmer innen im Median 
bei allen vier Schülerlösungstexte in vergleichbarer Häufigkeit fokussiert (Median 
Schülerlösungstext A = 25.0 %; Median Schülerlösungstext B = 21.4 %; Median 
Schülerlösungstext C = 37.1 %; Median Schülerlösungstext D = 28.1 %). Ledig- 
lich zwischen Schülerlösungstext B und C zeigt sich diesbezüglich ein moderater, 
statistisch signifikanter Medianunterschied (ES = .38). 


Interpretation: quantitative Teilbefunde 


Die eben aufgeführten Auffälligkeiten (a1) bis (a8) lassen alles in allem die folgenden 


Interpretationen zu. Diese decken sich zum Teil mit jenen Interpretationen, die im Rah- 


men von Phase 2a und 2b der inhaltsanalytischen Auswertung der Laut-Denk-Protokolle 


vorgenommen wurden (vgl. Unterabschnitt 6.3.2.3 und 6.3.2.4): 


1. 
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Aus den Auffälligkeiten (a1) bis (a4) lässt sich schlussfolgern, dass die Teilnehmer - 
innen bei der Korrektur der vier Schülerlösungstext den fachlich-konzeptuellen Ein- 
druck, die sprachliche Realisierung, sonstige Merkmale und mehrere /uneindeutige 
Merkmale jeweils unterschiedlich umfangreich fokussierten. Da die Schülerlösungs- 
texte A bis D im Rahmen der Entwicklungsstudie als eine Komposition aus vier 
konstrastierenden Schülerlösungstexten ausgewählt wurden, ist es plausibel anzu- 
nehmen, dass die fachlich-konzeptuelle Qualität, sowie die Qualität der sprachlichen 
Realisierung der vier Schülerlösungstexte beeinflusst, in welchem Umfang die Teil- 
nehmer _ innen welche Merkmale eines Schülerlösungstextes im Rahmen ihrer Leis- 
tungsurteilsgenese berücksichtigten, bzw. wie umfangreich sie bei welchem Schü- 
lerlösungstext auf Lehrerwissen und -können zur Feststellung und Beurteilung be- 
stimmter Merkmale einer Schülerlösung zurückgegriffen haben. 
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2. Aus Auffalligkeit (a5) geht hervor, dass die Teilnehmer_innen den fachlich-konzep- 
tuellen Eindruck signifikant haufiger bei den Schülerlösungstexten fokussierten, die 
eine geringe fachlich-konzeptuelle Qualität aufweisen (Median Schülerlösungstext B 
= 66.7 %; Median Schülerlösungstext D = 52.4 %), als bei den Schülerlösungstex- 
ten, die sich durch eine hohe fachlich-konzeptuelle Qualität auszeichnen (Median 
Schülerlösungstext A = 37.2 %; Median Schülerlösungstext C = 35.9 %). Hier zeigt 
sich also ein Hinweis darauf, dass die Teilnehmer _ innen die fachlich-konzeptuellen 
Leistungen in den vier Schülerlösungstexten in einer zum Teil defizitorientierten Art 
und Weise feststellten und beurteilten. 


3. Aus Auffalligkeit (a6) geht zweierlei hervor: Zum einen zeigt sich die Tendenz, dass 
die Teilnehmer _ innen — außer beim direkten Vergleich von Schülerlösungstext C 
und D - die sprachliche Realisierung signifikant häufiger bei den Schülerlösungs- 
texten fokussierten, die eine hohe fachlich-konzeptuelle Qualität aufweisen (Median 
Schülerlösungstext A = 19.1 %; Median Schülerlösungstext C = 18.1 %), als bei 
den Schülerlösungstexten mit einer geringen fachlich-konzeptuellen Qualität (Medi- 
an Schülerlösungstext B = 0.0 %; Median Schülerlösungstext D = 11.1 %). Hierin 
zeigt sich ein Hinweis, dass die Teilnehmer_ innen eine Feststellung und Beurteilung 
der sprachlichen Realisierung eines Schülerlösungstextes vor allem dann vornehmen, 
wenn dieser bis zu einem bestimmten Grad auch ihren fachlich-konzeptuellen Er- 
wartungen entspricht. Allgemein ausgedrückt lässt sich hier also ein empirischer 
Hinweis auf eine Konfundierung fachlich-konzeptueller und sprachlicher Leistungs- 
feststellung und -beurteilung ausfindig machen (Forschungsfrage F2). Zum anderen 
deutet sich bei den Teilnehmer innen auch eine zum Teil defizitorientierte Feststel- 
lung und Beurteilung der sprachlichen Realisierung schriftlicher Schülerleistungen 
an. Dies zeigt sich darin, dass die Teilnehmer innen die sprachliche Realisierung 
am häufigsten bei Schülerlösungstext A beachteten und dass sich, entgegen der 
eben zuerst genannten Tendenz, zwischen den prozentuellen Häufigkeiten, in denen 
die sprachliche Realisierung bei Schülerlösungstext C und D fokussiert wurde, kein 
signifikanter Medianunterschied zeigt. 


4. In Auffalligkeit (a7) zeigt sich, dass von den Teilnehmer _ innen sonstige Merkmale 
(z. B. Handschrift oder Textlänge) lediglich bei Schülerlösungstext C in nennens- 
werter Häufigkeit fokussiert wurden (Median 8.1 %), bzw. dass sonstige Merkmale 
bei der Korrektur der übrigen drei Schülerlösungstexte de facto keine Rolle spielten 
(mediane prozentuelle Häufigkeit jeweils 0.0 %). Da Schülerlösungstext C gemäß 
der Vorauswahl in der Entwicklungsstudie sowohl eine hohe fachlich-konzeptuelle 
Qualität aufweist, als auch eine hohe Qualität bezogen auf seine sprachliche Rea- 
lisierung, lässt sich aufgrund von Auffälligkeit (a7) vorsichtig vermuten, dass die 
Teilnehmer _ innen eine Feststellung und Beurteilung sonstiger Merkmale eines Schü- 
lerlösungstextes vor allem dann vornehmen, wenn dieser bis zu einem bestimmten 
Grad sowohl ihren fachlich-konzeptuellen, als auch ihren sprachlichen Erwartungen 
entspricht. 
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5. In Auffälligkeit (a8) zeigt sich, dass die Teilnehmer innen mehrere /uneindeutige 
Merkmale bei allen vier Schülerlösungstext in vergleichbarer Häufigkeit fokussierten. 
Dies lässt sich als möglicher Hinweis darauf deuten, dass die Teilnehmer _ innen die 
Leistungen in allen vier Schülerlösungstexten zu einem bestimmten Anteil auch auf 
Grundlage eines eher holistischen Eindrucks und/oder heuristisch feststellten und 
beurteilten. 


6.3.2.5.3. Quantitative Analyse der medianen prozentuellen Häufigkeiten der Seg- 
mente, die mit der Kategorie „Auseinandersetzung mit Schülerlösungstext A“, „B“, 
„C“ oder „D“ und zusätzlich mit den Subsubsubkategorien der Subsubkategorie 
3.0.2 (Bezug der Verortung) codiert wurden 

In Tabelle 6.24 sind für die Häufigkeiten der Segmente, die mit der Kategorie „Aus- 
einandersetzung mit Schülerlösungstext A“, „B“, „C“ oder „D“ und zusätzlich mit den 
Subsubsubkategorien der Subsubkategorie 3.0.2 (Bezug der Verortung) codiert wurden, 
die Ergebnisse der in Phase 2c vorgenommenen Aufbereitung und Analyse zusammenge- 
fasst. Tabelle 6.24 ist analog zu Tabelle 6.23 aufgebaut, und daher in identischer Art und 
Weise zu lesen. 


Auffälligkeiten in den deskriptiven Kennwerten und Ergebnissen der Wilcoxon- 
Vorzeichen-Rang-Tests 


In den in Tabelle 6.24 aufgeführten Kennwerten zeigen sich die folgenden Auffälligkeiten: 


(31) Schülerlösungstext A wurde von den Teilnehmer innen im Median vor allem ent- 
weder bezüglich sachlicher Kriterien verortet (Median = 50.0 %), oder der Bezug 
der Verortung war mehr- und/oder uneindeutig (Median = 37.5 %). Zwischen der 
prozentuellen Häufigkeit dieser Arten der Verortung zeigt sich kein statistisch signifi- 
kanter Medianunterschied. Andere Schülerlösungstexte, allgemeine Frfahrungen mit 
Physiklernenden, sowie mutmaßliche Personenmerkmale des der Schiilers_ Schiile- 
rin spielten mit einer medianen prozentuellen Häufigkeit von jeweils 0.0 % de facto 
keine Rolle. 


(32) Bei den Schülerlösungstexten B, C und D zeigt sich ein nahezu identisches Bild 
wie bei Schülerlösungstext A. Der einzige wesentliche Unterschied besteht darin, 
dass bei diesen drei Schülerlösungstexten sachliche Kriterien signifikant häufiger 
als Bezug der Verortung herangezogen wurden, als dass der Bezug der Verortung 
mehr- und/oder uneindeutig war (.53 < ES < .61). Der signifikante Ausgang der 
Wilcoxon-Vorzeichen-Rang-Tests zwischen den prozentuellen Häufigkeiten, in de- 
nen Schülerlösungstext C bezüglich anderer Schülerlösungstexte bzw. mutmaßlicher 
Personenmerkmale des der Schülers Schülerin verortet wurde, lässt sich auf den 
entsprechenden Streuungsunterschied zwischen diesen beiden Arten des Bezugs der 
Verortung zurückführen (IQR andere Schülerlösungstexte = 5.6 %; IQR mutmaßli- 
che Personenmerkmale = 0.0 %). 
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(83) 


Am seltensten wurden sachliche Kriterien als Bezug der Verortung bei Schülerlö- 
sungstext A herangezogen (Median = 50.0 %). Zu den prozentuellen Häufigkeiten, 
in denen sachliche Kriterien als Bezug der Verortung bei Schülerlösungstext B, C 
und D herangezogen wurden, zeigt sich jeweils ein moderater bis starker, statistisch 
signifikanter Medianunterschied (.39 < ES < .50). Zwischen Schülerlösungstext B, 
C und D zeigt sich diesbezüglich hingegen kein statistisch signifikanter Medianun- 
terschied. 


Am häufigsten wurden mehr- und/oder uneindeutige Bezüge der Verortung bei Schü- 
lerlösungstext A herangezogen (Median = 37.5 %). Zu den prozentuellen Häufigkei- 
ten, in denen mehr- und/oder uneindeutige Bezüge der Verortung bei Schülerlö- 
sungstext B, C und D herangezogen wurden, zeigt sich jeweils ein moderater bis 
starker, statistisch signifikanter Medianunterschied (.40 < ES < .52). Zwischen 
Schülerlösungstext B, C und D zeigt sich diesbezüglich hingegen kein statistisch 
signifikanter Medianunterschied. 


Andere Schülerlösungstexte, allgemeine Erfahrungen mit Physiklernenden, sowie 
mutmaßliche Personenmerkmale des der Schülers Schülerin wurden von den Teil- 
nehmer _ innen bei keinem Schülerlösungstext in nennenswerter Häufigkeit als Bezug 
der Verortung herangezogen (mediane prozentuelle Häufigkeit jeweils 0.0 %). Der 
signifikante Ausgang einzelner Wilcoxon-Vorzeichen-Rang-Tests zwischen entspre- 
chenden prozentuellen Häufigkeiten (vgl. Tabelle 6.24) lassen sich auf die jeweiligen 
Streuungsunterschiede zwischen den betrachten Arten des Bezugs der Verortung 
zurückführen. 


Interpretation: quantitative Teilbefunde 


Die eben aufgeführten Auffälligkeiten (31) bis (85) lassen alles in allem die folgenden 


Interpretationen zu. Diese decken sich zum Teil mit jenen Interpretationen, die im Rah- 
men von Phase 2a und 2b der inhaltsanalytischen Auswertung der Laut-Denk-Protokolle 
vorgenommen wurden (vgl. Unterabschnitt 6.3.2.3 und 6.3.2.4): 


1. 
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In den Auffälligkeiten (81) und (82) zeigt sich, dass die Teilnehmer_innen bei der 
Korrektur aller vier Schülerlösungstexte überwiegend sachliche Kriterien als Bezug 
der Verortung heranzogen (Median Schülerlösungstext A = 50.0 %; Median Schü- 
lerlösungstext B = 68.6 %; Median Schülerlösungstext C = 74.4 %; Median Schü- 
lerlösungstext D = 66.7 %). Hieraus lässt sich vermuten, dass die Teilnehmer in- 
nen Leistungen in allen vier Schülerlösungstexten in einer tendenziell deutlich an 
der kriterialen Bezugsnorm orientierten Art und Weise feststellten und beurteilten. 
Zusätzlich gestützt wird diese Interpretation zum einen dadurch, dass andere Schü- 
lerlösungstexte, allgemeine Erfahrungen mit Physiklernenden, sowie mutmaßliche 
Personenmerkmale des der Schülers Schülerin bei der Leistungsfeststellung und 
-beurteilung der einzelnen Schülerlösungstexte jeweils de facto keine Rolle spielten 
(mediane prozentuelle Häufigkeit jeweils 0.0 %; vgl. auch Auffälligkeit (35)) und 
zum anderen, dass die Teilnehmer innen im Median bei der Korrektur aller vier 
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Schülerlösungstexte zwar zu einem bedeutenden, jeweils aber nicht mehrheitlichen 
Anteil auch mehr- und/oder uneindeutige Bezüge der Verortung heranzogen (Medi- 
an Schülerlösungstext A = 37.5 %; Median Schülerlösungstext B = 18.8 %; Median 
Schülerlösungstext C = 21.9 %; Median Schülerlösungstext D = 22.2 %). Insbesonde- 
re dass Personenmerkmale als Bezug für die Verortung der vier Schülerlösungstexte 
de facto nicht herangezogen wurden, könnte allerdings ein Artefakt der Erhebung im 
Rahmen der Laborsituation darstellen. Grund hierfür ist, dass den Teilnehmer in- 
nen im Rahmen der Laborsituation keine Informationen über Personenmerkmale der 
Schüler _innen, die die Schülerlösungstexte A bis D verfasst haben, zur Verfügung 
gestellt wurden. 


. In den Auffälligkeiten (33) und (04) zeigt sich, dass die eben aufgeführte Tendenz 
Leistungen in den Schülerlösungstexten in einer Art und Weise festzustellen und 
zu beurteilen, die an der kriterialen Bezugsnorm orientiert ist, bei Schülerlösungs- 
text A signifikant weniger stark ausgeprägt ist als bei den Schülerlösungstexten B, 
C, und D. Zum einen ist es naheliegend anzunehmen, dass sich dieser Umstand 
auf die Merkmale von Schülerlösungstext A zurückführen lässt, anhand derer er 
im Rahmen der Entwicklungsstudie ausgewählt wurde. Eine plausible Interpreta- 
tion der Auffälligkeiten (33) und (4) ist daher, dass die Teilnehmer innen über 
vergleichsweise wenig Wissen und Können zur kriterialen Feststellung und Beur- 
teilung von Schülerleistungen mit einer hohen fachlich-konzeptuellen Qualität und 
gleichzeitig geringer Qualität in der sprachlichen Realisierung verfügten. Sie verorte- 
ten Schülerlösungstext A daher vergleichsweise wenig bezüglich sachlicher Kriterien 
bzw. haben bei Schülerlösungstext A daher vergleichsweise häufig mehr- und/oder 
uneindeutige Bezüge der Verortung heranzogen. Zum anderen ist aber nicht aus- 
zuschließen, dass es sich bei den Auffälligkeiten (83) und (34) um ein Artefakt 
der Erhebung im Rahmen der Laborsituation handelt: Die Schülerlösungstexte A 
bis D waren im Aufgabenheft, dass die Lehrkräfte bearbeiteten, in alphabetischer 
Reihenfolge abgedruckt (vgl. Anhang C.1). Schülerlösungstext A stellte daher bei 
jedem_ jeder Teilnehmer in den ersten dar, mit dem diese im Rahmen der Laborsi- 
tuation konfrontiert wurden. Dementsprechend ist eine weitere mögliche Erklärung 
für die Auffälligkeiten (93) und (ß4), dass sich die Teilnehmer innen zu Beginn der 
laut-denkenden Korrekturarbeit — also vor allem bei der Korrektur von Schülerlö- 
sungstext A — zunächst häufiger mehr- und/oder uneindeutige Bezüge der Verortung 
herangezogen haben, im weiteren Verlauf dann aber in zunehmender Häufigkeit die 
vier Schülerlösungstexte anhand sachlicher Kriterien verorteten. 
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6.3.2.5.4. Quantitative Analyse der medianen prozentuellen Häufigkeiten der Seg- 
mente, die mit der Kategorie , Auseinandersetzung mit Schülerlösungstext A“, „B“, 
„C“ oder „D“ und zusätzlich mit den Subsubsubkategorien der Subsubkategorie 
3.0.3 (Art der AuBerung) codiert vvurden 

In Tabelle 6.25 sind für die Häufigkeiten der Segmente, die mit der Kategorie , Aus- 
einandersetzung mit Schülerlösungstext A“, „B“, „C“ oder „D“ und zusätzlich mit den 
Subsubsubkategorien der Subsubkategorie 3.0.3 (Art der Äußerung) codiert wurden, die 
Ergebnisse der in Phase 2c vorgenommenen Aufbereitung und Analyse zusammengefasst. 
Tabelle 6.25 ist analog zu Tabelle 6.23 aufgebaut, und daher in identischer Art und Weise 
zu lesen. 


Auffalligkeiten in den deskriptiven Kennwerten und Frgebnissen der VVilcoxon- 
Vorzeichen-Rang-Tests 


m den in Tabelle 6.25 aufgeführten Kennwerten zeigen sich die folgenden Auffalligkeiten: 


(y1) Bei Sehülerlösungstext A halten sich die medianen prozentuellen Häufigkeiten, in de- 
nen sich die Teilnehmer_innen positiv wertend/akzeptierend, negativ wertend/ab- 
lehnend oder neutral/gemischt/sonstig äußerten, nahezu die Waage. Lediglich zwi- 
schen der prozentuellen Häufigkeit, in der sich die Teilnehmer innen positiv wer- 
tend/akzeptierend zu Schülerlösungstext A äußerten, und jener, in denen sie sich 
neutral/ gemischt /sonstig äußerten, zeigt sich ein moderater, statistisch signifikanter 
Medianunterschied (ES = .37). 


(y2) Zu Schülerlösungstext B wurde sich von den Teilnehmer innen am wenigsten po- 
sitiv wertend/akzeptierend geäußert (Median = 10.5 %). Zwischen der prozentu- 
ellen Häufigkeit positiv wertender/akzeptierender Äußerungen und negativ werten- 
der/ablehnender, bzw. neutraler / gemischter /sonstiger Äußerungen zeigt sich jeweils 
ein starker, statistisch signifikanter Medianunterschied (.52 < ES < .59). Kein sta- 
tistisch signifikanter Medianunterschied zeigt sich hingegen zwischen der prozen- 
tuellen Häufigkeit, in der sich die Teilnehmer _ innen negativ wertend/ablehend zu 
Schülerlösungstext B äußerten (Median = 45.7 %), und jener, in der sie sich neu- 
tral/gemischt/sonstig äußerten (Median = 34.3 %). 


(y3) Zu Schülerlösungstext C wurde sich von den Teilnehmer innen vor allem posi- 
tiv wertend/akzeptierend geäußert (Median = 66.7 %). Zwischen der prozentuel- 
len Häufigkeit positiv wertender/akzeptierender Äußerungen und negativ werten- 
der /ablehnender bzw. neutraler /gemischter/sonstiger Äußerungen zeigt sich jeweils 
ein starker, statistisch signifikanter Medianunterschied (.57 < ES < .58). Kein 
statistisch signifikanter Medianunterschied zeigt sich hingegen zwischen der prozen- 
tuellen Häufigkeit, in der sich die Teilnehmer _ innen negativ wertend/ablehend zu 
Schülerlösungstext C äußerten (Median = 14.3 %), und jener, in der sie sich neu- 
tral/gemischt/sonstig äußerten (Median = 15.2 %). 
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(74) 


(yT) 


Bei Schülerlösungstext D zeigt sich zwischen den prozentuellen Haufigkeiten al- 
ler codierten Arten der Äußerungen jeweils ein starker, statistisch signifikanter 
Medianunterschied (.51 < ES < .62). Negativ wertende/Ablehnende Äußerun- 
gen traten dabei im Median am häufigsten auf (Median = 72.7 %), gefolgt von 
neutralen/gemischten/sonstigen Äußerungen (Median = 20.0 %). Positiv werten- 
de/Akzeptierende Äußerungen spielten bei Schülerlösungstext D mit einer medianen 
prozentuellen Häufigkeit von 0.0 % de facto keine Rolle. 


Zwischen den prozentuellen Häufigkeiten, in denen sich die Teilnehmer innen po- 
sitiv wertend/akzeptierend zu Schülerlösungstext A, B, C oder D äußerten, zeigt 
sich jeweils ein moderater bis starker, statistisch signifikanter Medianunterschied 
(.34 < ES < .62). Im Median am häufigsten wurde sich zu Schülerlösungstext C 
positiv wertend/akzeptierend geäußert (Median = 66.7 %), den zweiten diesbezüg- 
lichen Rangplatz nimmt Schülerlösungstext A ein (Median = 27.8 %), den dritten 
Schülerlösungstext B (Median = 10.5 %) und Schülerlösungstext D bildet mit einer 
medianen prozentuellen Häufigkeit von 0.0 % das Schlusslicht. 


Zwischen den prozentuellen Häufigkeiten, in denen sich die Teilnehmer innen ne- 
gativ wertend/ablehnend zu Schülerlösungstext A, B, C oder D äußerten, zeigt 
sich jeweils ein moderater bis starker, statistisch signifikanter Medianunterschied 
(.37 < ES < .62). Im Median am häufigsten wurde sich zu Schülerlösungstext D 
negativ wertend/ablehnend geäußert (Median = 72.7 %), den zweiten diesbezügli- 
chen Rangplatz nimmt Schülerlösungstext B ein (Median = 45.7 %), den dritten 
Schülerlösungstext A (Median = 29.5 %) und Schülerlösungstext C bildet mit einer 
medianen prozentuellen Häufigkeit von 14.3 % das Schlusslicht. 


Am häufigsten neutral/gemischt/sonstig äußerten sich die Teilnehmer _ innen bei 
Schülerlösungstext A und B (Median Schülerlösungstext A = 37.0 % ; Median 
Schülerlösungstext B = 34.3 %). Zwischen den prozentuellen Häufigkeiten, in de- 
nen sich bei diesen beiden Schülerlösungstexten neutral/ gemischt /sonstig geäußert 
wurde, zeigt sich kein statistisch signifikanter Medianunterschied. Gleiches gilt für 
die prozentuellen Häufigkeiten, in denen sich die Teilnehmer innen zu Schülerlö- 
sungstext C und D neutral/ gemischt /sonstig äußerten (Median Schülerlösungstext C 
= 15.2 % ; Median Schülerlösungstext D = 20.0 %). Ein moderater bis starker, 
statistisch signifikanter Medianunterschied diesbezüglich zeigt sich hingegen jeweils 
zwischen Schülerlösungstext A bzw. B und Schülerlösungstext C bzw. D (.30 < 
ES < .54). 


Interpretation: quantitative Teilbefunde 


Die eben aufgeführten Auffälligkeiten (y1) bis (77) lassen alles in allem die folgenden In- 


terpretationen zu. Diese decken sich zum Teil mit jenen Interpretationen, die im Rahmen 


der quantitativen Analyse der Punkte, die die Teilnehmer_innen an die Schülerlösungs- 


texte A bis D vergeben haben, vorgenommen wurden (vgl. Unterabschnitt 6.3.1): 
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1. Aus den Auffälligkeiten (71) bis (y4) lässt sich schlussfolgern, dass sich die Teil- 
nehmer_innen bei der Korrektur der vier Schülerlösungstexte in unterschiedlichem 
Umfang positiv wertend/akzeptierend, negativ vvertend /ablehnend und neutral/ge- 
mischt /sonstig äußerten. Da die Schülerlösungstexte A bis D im Rahmen der Ent- 
wicklungsstudie als eine Komposition aus vier konstrastierenden Schülerlösungstex- 
ten ausgewählt wurden, ist es pausibel anzunehmen, dass die fachlich-konzeptuelle 
Qualität, sowie die Qualität der sprachlichen Realisierung der vier Schülerlösungs- 
texte beeinflusst, in welchem Umfang sich die Teilnehmer _ innen in welcher Art und 
Weise zu einem Schülerlösungstext äußerten. In den Auffälligkeiten (y5) und (76) 
zeigen sich vier Tendenzen, die diese Interpretation zusätzlich unterstützen: 


Tendenz 1: Bei zwei Schülerlösungstexten, deren fachlich-konzeptuelle Qualität ver- 
gleichbar ist (Schülerlösungstext A und C, bzw. B und D), wurde sich 
bei dem Schülerlösungstext, dessen sprachliche Realisierung eine höhe- 
re Qualität aufweist, im Median häufiger positiv wertend/akzeptierend 
geäußert (starker, statistisch signifikanter Medianunterschied zwischen 
Schülerlösungstext A und C, bzw. moderater, statistisch signifikanter 
Medianunterschied zwischen Schülerlösungstext B und D). 


Tendenz 2: Bei zwei Schülerlösungstexten, deren fachlich-konzeptuelle Qualität ver- 
gleichbar ist (Schülerlösungstext A und C, bzw. B und D), wurde sich bei 
dem Schülerlösungstext, dessen sprachliche Realisierung eine geringere 
Qualität aufweist, im Median häufiger negativ wertend/ablehnend ge- 
äußert (moderater, statistisch signifikanter Medianunterschied zwischen 
Schülerlösungstext A und C, bzw. Bund D). 


Tendenz 3: Bei zwei Schülerlösungstexten mit vergleichbarer Qualität in der sprach- 
lichen Realisierung (Schülerlösungstext A und D, bzw. B und C), wurde 
sich bei dem Schülerlösungstext, dessen fachlich-konzeptuelle Qualität 
höher ist, im Median häufiger positiv wertend/akzeptierend geäußert 
(starker, statistisch signifikanter Medianunterschied zwischen Schülerlö- 
sungstext A und D, bzw. B und O). 


Tendenz 4: Bei zwei Schülerlösungstexten mit vergleichbarer Qualität in der sprach- 
lichen Realisierung (Schülerlösungstext A und D, bzw. B und C), wurde 
sich bei dem Schülerlösungstext, dessen fachlich-konzeptuelle Qualität 
geringer ist, im Median häufiger negativ wertend/ablehnend geäußert 
(starker, statistisch signifikanter Medianunterschied zwischen Schülerlö- 
sungstext A und D, bzw. B und ©). 


2. Ferner zeigen sich in Auffälligkeit (y5) und (76) zwei weitere Tendenzen, wenn man 
die Ergebnisse für Schülerlösungstexte B und D mit jenen für Schülerlösungstext A 
und © vergleicht: 


Tendenz 5: Der Medianunterschied zwischen den prozentuellen Häufigkeiten positiv 
wertender/akzeptierender Äußerungen ist bei den Schülerlösungstexten 
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B und D deutlich geringer (moderater Effekt; ES = .34), als zwischen 
Sehülerlösungstext A und C (starker Effekt: ES = .58). 


Tendenz 6: Der Medianunterschied zwischen den prozentuellen Haufigkeiten negativ 
vvertender /ablehnender Äußerungen ist bei den Schülerlösungstexten B 
und D geringer (moderater Effekt; ES = .37), als zwischen Schülerlö- 
sungstext A und C (moderater Effekt; ES = .42). 


Diese Schülerlösungstext-Paare gleichen sich darin, dass die fachlich-konzeptuelle 


Qualitat beider Texte jeweils vergleichbar ist und dass sich beide Texte bezüglich 
der Qualität ihrer sprachlichen Realisierung voneinander unterscheiden. Die Schü- 
lerlösungstext-Paare unterscheiden sich jedoch darin, dass die fachlich-konzeptuelle 
Qualität von Schülerlösungstext B und D geringer ist, als jene von Schülerlösungs- 
text A und C. Die eben aufgeführte fünfte und sechste Tendenz lässt sich daher 
im Sinne von Forschungsfrage (F2) interpretieren: Die Unterschiede in den Effekt- 
stärken deuten darauf hin, dass die Teilnehmer _ innen während der laut-denkenden 
Korrekturarbeit bei den Schülerlösungstexten, die eine hohe fachlich-konzeptuelle 
Qualität aufweisen,... 


. sprachliche Qualitäten stärker positiv wertend/akzeptierend berücksichtigten 
(Tendenz 5), 


.. sprachliche Mängel stärker negativ vvertend /ablehnend berücksichtigten (Ten- 
denz 6), 


.. als bei den Schülerlösungstexten mit einer geringen fachlich-konzeptuellen Qua- 
lität. In den medianen prozentuellen Häufigkeiten, in denen sich die Teilnehmer_- 
innen bei der laut-denkenden Korrektur der vier Schülerlösungstexte positiv wer- 
tend/akzeptierend, bzw. negativ wertend/ablehnend äußerten, zeigt sich damit also 
ein empirischen Hinweis auf eine Konfundierung fachlich-konzeptueller und sprach- 
licher Leistungsurteilsgenese. 


6.3.2.5.5. Quantitative Analyse der medianen prozentuellen Häufigkeiten der Seg- 
mente, die mit den Subsubsubkategorien der Subsubkategorie 3.0.1 (fokussiertes 
Merkmal) und zusätzlich mit denen der Subsubkategorie 3.0.2 (Bezug der Veror- 
tung) codiert wurden 


In Tabelle 6.26 sind für die Häufigkeiten der Segmente, die mit den Subsubsubkategorien 


der Subsubkategorie 3.0.1 (fokussiertes Merkmal) und zusätzlich mit denen der Subsub- 


kategorie 3.0.2 (Bezug der Verortung) codiert wurden, die Ergebnisse der in Phase 2c 


vorgenommenen Aufbereitung und Analyse zusammengefasst. Tabelle 6.26 ist analog zu 
Tabelle 6.23 aufgebaut, und daher in identischer Art und Weise zu lesen. 
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Auffalligkeiten in den deskriptiven Kennwerten und Ergebnissen der VVilcoxon- 


Vorzeichen-Rang-Tests 


m den in Tabelle 6.26 aufgeführten Kennwerten zeigen sich die folgenden Auffalligkeiten: 


(51) 


(2) 


(63) 
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Sowohl der fachlich-konzeptuelle Eindruck, als auch die sprachliche Realisierung, 
sowie ferner sonstige Merkmale eines Schülerlösungstextes wurden von den Teil- 
nehmer innen nahezu vollständig bezüglich sachlicher Kriterien verortet (Medi- 
an fachlich-konzeptueller Eindruck = 94.3 %; Median sprachliche Realisierung = 
100.0 %; Median sonstige Merkmale = 100.0 %). Bei allen eben benannten Merk- 
malsfoki zeigt sich zwischen der prozentuellen Häufigkeit, in der sachliche Kriterien 
als Bezug der Verortung herangezogen wurden und der prozentuellen Häufigkeit 
aller übrigen codierten Arten der Verortung, ein starker, statistisch signifikanter 
Medianunterschied (.59 < ES < .64). Ferner zeigt sich beim fachlich-konzeptuellen 
Eindruck eines Schülerlösungstextes zwischen der prozentuellen Häufigkeit, in de- 
nen dieser bezüglich mutmaßlicher Personenmerkmale verortet wurde, und jener, 
in der dieser mehr- und/oder uneindeutig verortet wurde, ebenfalls ein modera- 
ter, statistisch signifikanter Medianunterschied (ES = .37). Des Weiteren hatten 
die durchgeführten Wilcoxon-Vorzeichen-Rang-Tests für die prozentuellen Häufig- 
keiten, in denen die sprachliche Realisierung bezüglich allgemeiner Erfahrungen mit 
Physiklernenden bzw. mehr- und/oder uneindeutigen Bezügen verortet wurde, einen 
signifikanten Ausgang. Dies lässt sich allerdings auf die Streuungsunterschiede zwi- 
schen diesen beiden Arten des Bezugs der Verortung zurückführen (IQR allgemeine 
Erfahrungen mit Physiklernenden = 2.6 %; IQR mehr- und/oder uneindeutige Be- 
züge der Verortung = 0.0 %). 


Bei mehreren/uneindeutigen Merkmalen eines Schülerlösungstextes wurden von den 
Teilnehmer innen am häufigsten mehr- und/oder uneindeutige Bezüge der Veror- 
tung herangezogen (Median = 73.9 %). Zwischen der prozentuellen Häufigkeit dieser 
und den übrigen codierten Arten der Verortung zeigt sich jeweils ein starker, sta- 
tistisch signifikanter Medianunterschied (jeweils ES = .62). Den zweiten diesbezüg- 
lichen Rangplatz nehmen sachliche Kriterien als Bezug der Verortung ein (Median 
= 14.3 %). Andere Schülerlösungstexte, allgemeine Erfahrungen mit Physiklernen- 
den, sowie mutmaßliche Personenmerkmale des der Schiilers_ Schiilerin spielten bei 
mehreren/uneindeutigen Merkmalen eines Schülerlösungstextes mit einer medianen 
prozentuellen Häufigkeit von 0.0 % de facto keine Rolle. 


Sachliche Kriterien wurden von den Teilnehmer _ innen bei fast allen codierten Merk- 
malsfoki in vergleichbarer Häufigkeit als Bezug der Verortung herangezogen. Ledig- 
lich zwischen der prozentuellen Häufigkeit, in der mehrere/uneindeutige Merkmale 
eines Schülerlösungstextes bezüglich sachlicher Kriterien verortet wurden, und je- 
ner, in der dies bei den übrigen codierten Merkmalsfoki geschah, zeigt sich jeweils 
ein starker, statistisch signifikanter Medianunterschied (.57 < ES < .62). 


Andere Schülerlösungstexte, sowie allgemeine Erfahrungen mit Physilernenden wur- 
den von den Teilnehmer innen bei keinem der codierten Merkmalsfoki in nennens- 
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werter Hàufigkeit als Bezug der Verortung herangezogen (mediane prozentuelle Hau- 
figkeit jeweils 0.0 %). Der signifikante Ausgang einzelner Wilcoxon-Vorzeichen-Rang- 
Tests zwischen entsprechenden prozentuellen Haufigkeiten (vgl. Tabelle 6.26) lässt 
sich auf die jeweiligen Streuungsunterschiede zwischen den betrachteten codierten 
Merkmalsfoki zurückführen. 


(65) Mutmaßliche Personenmerkmale des der Schülers Sehülerin wurden von den Teil- 
nehmer innen bei nahezu keinem der codierten Merkmalsfoki in nennenswerter 
Häufigkeit als Bezug der Verortung herangezogen (Median fachlich-konzeptueller 
Eindruck = 1.6 %; alle übrigen medianen prozentuellen Häufigkeiten jeweils 0.0 %). 
Alle durchgeführten Wilcoxon-Vorzeichen-Rang-Tests zwischen den entsprechenden 
prozentuellen Häufigkeiten hatten einen nicht signifikanten Ausgang (vgl. Tabelle 
6.26). 


(66) Mehr- und/oder uneindeutige Bezüge der Verortung wurden von den Teilnehmer - 
innen am häufigsten bei der Feststellung und Beurteilung mehrerer / uneindeutiger 
Merkmale eines Schülerlösungstextes herangezogen (Median = 73.9 %). Zu den pro- 
zentuellen Häufigkeiten, in denen mehr- und/oder uneindeutige Bezüge der Veror- 
tung bei den übrigen codierten Merkmalsfoki herangezogen wurden, zeigt sich jeweils 
ein starker, statistisch signifikanter Medianunterschied (jeweils ES = .62). Zwischen 
den übrigen codierten Merkmalsfoki zeigt sich diesbezüglich kein statistisch signifi- 
kanter Medianunterschied. 


Interpretation: quantitative Teilbefunde 


Die eben aufgeführten Auffälligkeiten (61) bis (66) lassen alles in allem die folgende In- 
terpretation zu: In den Auffälligkeiten (61), sowie (63) bis (65) zeigt sich, dass die Teil- 
nehmer _ innen de facto ausschließlich sachliche Kriterien als Bezug der Verortung her- 
anzogen, wenn sie ein bestimmtes Schülerlösungstextmerkmal bei ihrer Leistungsurteils- 
genese in den Fokus rückten (Median fachlich-konzeptueller Eindruck = 94.3 %; Median 
sprachliche Realisierung = 100.0 %; Median sonstige Merkmale = 100.0 %). Lediglich 
bei mehreren/uneindeutigen Merkmalen eines Schülerlösungstextes war der Bezug der 
Verortung signifikant häufiger mehr- und/oder uneindeutig (vgl. Auffälligkeiten (62) und 
(66)). Ferner spielten bei keinem der codierten Merkmalsfoki andere Schülerlösungstex- 
te, allgemeine Erfahrungen mit Physiklernenden, sowie mutmaßliche Personenmerkmale 
des der Schülers Schülerin de facto eine Rolle (Median mutmaßliche Personenmerkma- 
le als Bezug der Verortung des fachlich-konzeptuellen Eindrucks = 1.6 %; alle übrigen 
medianen prozentuellen Häufigkeiten jeweils 0.0 %). Insgesamt lässt sich hieraus schluss- 
folgern, dass die Teilnehmer _ innen bestimmte Schülerlösungstextmerkmale (den fachlich- 
konzeptuellen Eindruck, die sprachliche Realisierung und sonstige Merkmale) in einer ten- 
denziell deutlich an der kriterialen Bezugsnorm orientierten Art und Weise feststellten und 
beurteilten. Allein bei mehr- und/oder uneindeutigen Merkmalen eines Schülerlösungstex- 
tes lässt sich keine Tendenz zu einer bestimmten Bezugsnorm ausfindig machen. Ferner 
wird aus den Auffälligkeiten (51) bis (66) deutlich, dass sich bei den Teilnehmer innen kei- 
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ne Hinweise auf eine Orientierung an der sozialen und/oder der individuellen Bezugsnorm 
im Rahmen der Laborsituation zeigten (verschwinden geringe Hàufigkeit, in der andere 
Schülerlösungstexte, sowie mutmaßliche Personenmerkmale des der Schülers Schülerin 
als Bezug der Verortung bei allen codierten Merkmalsfoki). Das Fehlen von Hinvveisen für 
eine Orientierung an der individuellen Bezugsnorm könnte es allerdings ein Erhebungsar- 
tefakt darstellen, da den Teilnehmer innen keine Informationen über Personenmerkmale 
der Schiiler_innen, die die Schülerlösungstexte A bis D verfasst haben, zur Verfügung 
gestellt wurden. 


6.3.2.5.6. Quantitative Analyse der medianen prozentuellen Häufigkeiten der Seg- 
mente, die mit den Subsubsubkategorien der Subsubkategorie 3.0.1 (fokussiertes 
Merkmal) und zusätzlich mit denen der Subsubkategorie 3.0.3 (Art der Äußerung) 
codiert vvurden 

In Tabelle 6.27 sind für die Haufigkeiten der Segmente, die mit den Subsubsubkategori- 
en der Subsubkategorie 3.0.1 (fokussiertes Merkmal) und zusatzlich mit denen der Sub- 
subkategorie 3.0.3 (Art der Äußerung) codiert wurden, die Ergebnisse der in Phase 2c 
vorgenommenen Aufbereitung und Analyse zusammengefasst. Tabelle 6.27 ist analog zu 
Tabelle 6.23 aufgebaut, und daher in identischer Art und Weise zu lesen. 


Auffalligkeiten in den deskriptiven Kennwerten und Ergebnissen der Wilcoxon- 
Vorzeichen-Rang-Tests 


In den in Tabelle 6.27 aufgeführten Kennwerten zeigen sich die folgenden Auffalligkeiten: 


(el) Zwischen den prozentuellen Häufigkeiten, in denen sich die Teilnehmer innen zum 
fachlich-konzeptuellen Eindruck eines Schülerlösungstextes positiv vvertend /akzep- 
tierend, negativ wertend/ablehnend oder neutral/gemischt/sonstig äußerten, 
zeigt sich jeweils ein moderater bis starker, statistisch signifikanter Medianunter- 
schied (.31 < ES < .59). Im Median am häufigsten wurde sich dabei positiv 
wertend/akzeptierend zum fachlich-konzeptuellen Eindruck eines Schülerlösungs- 
textes geäußert (Median = 51.4 %), am zweithäufigsten traten negativ werten- 
de/ablehnende Äußerungen auf (Median = 27.3%) und am seltensten kam es zu 
neutralen/gemischten/sonstigen Äußerungen (Median = 19.2 %). 


(e2) Zur sprachlichen Realisierung eines Schülerlösungstextes wurde sich von den Teil- 
nehmer innen vor allem negativ wertend/ablehnend geäußert (Median = 69.6 %). 
Zwischen der prozentuellen Häufigkeit negativ wertender/ablehnender Äußerungen 
und allen übrigen codierten Arten der Äußerung zeigt sich jeweils ein starker, statis- 
tisch signifikanter Medianunterschied (.56 < ES < .59). Kein statistisch signifikan- 
ter Medianunterschied zeigt sich hingegen zwischen der prozentuellen Häufigkeit, in 
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(e4) 
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der sich die Teilnehmer_innen positiv wertend/akzeptierend zur sprachlichen Rea- 
lisierung eines Schülerlösungstextes äußerten (Median = 13.6 70), und jener, in der 
sie sich diesbezüglich neutral/ gemischt /sonstig äußerten (Median = 10.7 %). 


Zwischen den prozentuellen Häufigkeiten, in denen sich die Teilnehmer innen zu 
sonstigen Merkmalen eines Schülerlösungstextes positiv vvertend /akzeptierend, ne- 
gativ wertend/ablehnend oder neutral/gemischt/sonstig äußerten, zeigt sich jeweils 
kein statistisch signifikanter Medianunterschied (Median positiv wertende/akzep- 
tierende Äußerungen = 25.0 %; Median negativ wertende/ablehnende Äußerungen 
= 14.3 %; Median neutrale/gemischte/sonstige Äußerungen = 20.0 %). 


Zu mehreren /uneindeutigen Merkmalen eines Schülerlösungstextes wurde sich von 
den Teilnehmer innen vor allem neutral/gemischt/sonstig geäußert (Median 
= 54.5 %). Zwischen der prozentuellen Häufigkeit neutraler/gemischter/sonstiger 
Äußerungen und allen übrigen codierten Arten der Äußerung zeigt sich jeweils ein 
starker, statistisch signifikanter Medianunterschied (.51 < ES < .59). Kein statis- 
tisch signifikanter Medianunterschied zeigt sich hingegen zwischen der prozentuel- 
len Häufigkeit, in der sich die Teilnehmer innen positiv wertend/akzeptierend zu 
mehreren/uneindeutigen Merkmalen eines Schülerlösungstextes äußerten (Median = 
25.0 %), und jener, in der sie sich diesbezüglich negativ wertend/ablehnend äußerten 
(Median = 17.5 %). 


Am häufigsten positiv wertend/akzeptierend äußerten sich die Teilnehmer innen 
zum fachlich-konzeptuellen Eindruck eines Schülerlösungstextes (Median = 51.4 %). 
Zwischen der prozentuellen Häufigkeit, in der sich positiv wertend /akzeptierend zum 
fachlich-konzeptuellen Eindruck eines Schülerlösungstextes geäußert wurde, und je- 
ner, in der sich die Teilnehmer innen zu den übrigen codierten Merkmalsfoki po- 
sitiv wertend/akzeptierend äußerten, zeigt sich jeweils ein moderater bist starker, 
statistisch signifikanter Medianunterschied (.34 < ES < .62). Kein statistisch si- 
gnifikanter Medianunterschied zeigt sich hingegen jeweils zwischen der prozentuel- 
len Häufigkeit, in der sich die Teilnehmer innen positiv wertend/akzeptierend zur 
sprachlichen Realisierung, zu sonstigen Merkmalen oder mehreren /uneindeutigen 
Merkmalen eines Schülerlösungstextes äußerten. 


Am häufigsten negativ wertend/ablehnend äußerten sich die Teilnehmer innen zur 
sprachlichen Realisierung eines Schülerlösungstextes (Median = 69.6 %). Zwischen 
der prozentuellen Häufigkeit, in der sich negativ wertend/ablehnend zur sprach- 
lichen Realisierung eines Schülerlösungstextes geäußert wurde, und jener, in der 
sich die Teilnehmer innen zu den übrigen codierten Merkmalsfoki negativ wer- 
tend/ablehnend äußerten, zeigt sich jeweils ein starker, statistisch signifikanter Me- 
dianunterschied (.54 < ES < .61). Des Weiteren zeigt sich zwischen der prozentu- 
ellen Häufigkeit, in der sich negativ wertend/ablehnend zum fachlich-konzeptuellen 
Eindruck eines Schülerlösungstextes geäußert wurden, und jener, in der sich nega- 
tiv wertend/ablehnend bezüglich mehrerer /uneindeutiger Merkmale eines Schüler- 
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lösungstextes geäußert wurde, ein moderater, statistisch signifikanter Medianunter- 
schied (ES = .47). 


(e7) Am häufigsten neutral/ gemischt /sonstig äußerten sich die Teilnehmer innen zu 
mehreren /uneindeutigen Merkmalen eines Schülerlösungstextes (Median = 51.4 %). 
Zwischen der prozentuellen Häufigkeit, in der sich neutral/gemischt /sonstig zu meh- 
reren/uneindeutigen Merkmalen eines Schülerlösungstextes geäußert wurde, und je- 
ner, in der sich die Teilnehmer innen zu den übrigen codierten Merkmalsfoki neu- 
tral/ gemischt /sonstig äußerten, zeigt sich jeweils ein starker, statistisch signifikan- 
ter Medianunterschied (.50 < ES < .63). Kein statistisch signifikanter Median- 
unterschied zeigt sich hingegen jeweils zwischen der prozentuellen Häufigkeit, in 
der sich die Teilnehmer _ innen neutral/ gemischt /sonstig zum fachlich-konzeptuellen 
Eindruck, zur sprachlichen Realisierung oder zu sonstigen Merkmalen eines Schü- 
lerlösungstextes äußerten. 


Interpretation: quantitative Teilbefunde 


Die eben aufgeführten Auffälligkeiten (el) bis (e7) lassen alles in allem die folgenden In- 
terpretationen zu. Diese decken sich zum Teil mit jenen Interpretationen, die im Rahmen 
von Phase 2b der inhaltsanalytischen Auswertung der Laut-Denk-Protokolle vorgenom- 
men wurden (vgl. Unterabschnitt 6.3.2.4): 


1. Aus den Auffälligkeiten (el) bis (e4) wird deutlich, dass sich die Teilnehmer in- 
nen jeweils unterschiedlich umfangreich positiv wertend/akzeptierend, negativ wer- 
tend/ablehnend oder neutral/gemischt/sonstig äußerten, je nachdem, ob sie den 
fachlich-konzeptuellen Eindruck, die sprachliche Realisierung, sonstige Merkmale 
und mehrere/uneindeutige Merkmale der vier Schülerlösungstexte fokussierten. Hier 
zeigt sich also ein Hinweis darauf, dass die Leistungsurteilsgenese der Teilnehmer_- 
innen, bei verschiedenen Schüerlösungstextmerkmalen auch unterschiedliche Ten- 
denzen hinsichtlich einer Fähigkeiten- oder Defizitorientierung aufweist. 


2. Aus den Auffälligkeiten (el) und (e5) geht hervor, dass sich die Teilnehmer in- 
nen zum fachlich-konzeptuellen Eindruck der vier Schülerlösungstexte überwiegend 
positiv wertend/akzeptierend äußerten (Median = 51.4 %) und dies signifikant häu- 
figer taten, als bei den übrigen codierten Merkmalsfoki (.34 < ES < .62). Hier 
zeigt sich also ein Hinweis auf eine deutliche Tendenz zu einer fähigkeitsorientier- 
ten Feststellung und Beurteilung fachlich-konzeptueller Schülerleistung durch die 
Teilnehmer innen. 


3. Aus den Auffälligkeiten (e2) und (e6) geht hervor, dass sich die Teilnehmer in- 
nen zur sprachlichen Realisierung der vier Schülerlösungstexte überwiegend negativ 
wertend/ablehnend äußerten (Median = 69.6 %) und dies signifikant häufiger taten, 
als bei den übrigen codierten Merkmalsfoki (.54 < ES < .61). Hier zeigt sich also 
ein Hinweis auf eine deutliche Tendenz zu einer defizitorientierten Feststellung und 
Beurteilung sprachlicher Schülerleistung durch die Teilnehmer innen. 
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4. Aus den Auffälligkeiten (e3) und (€5) bis (€7) geht hervor, dass sich die media- 


nen prozentuellen Häufigkeiten, in denen sich die Teilnehmer innen positiv wer- 
tend/akzeptierend, negativ wertend/ablehnend oder neutral/gemischt/sonstig zu 
sonstigen Merkmalen der vier Schülerlösungstexte äußerten, die Waage halten (Me- 
dian positiv wertende/akzeptierende Äußerungen = 25.0 %; Median negativ wer- 
tende/ablehnende Äußerungen = 14.3 %; Median neutrale/gemischte/sonstige Äu- 
Berungen = 20.0 %; jeweils kein statistisch signifikanter Medianunterschied). Dies 
lässt sich als Hinweise darauf deuten, dass die Feststellung und Beurteilung sonstiger 
Schülerlösungstextmerkmale durch die Teilnehmer _ innen weder in einer tendenziell 
defizitorientierten, noch einer fähigkeitsorientierten Art und Weise stattfand. 


. Aus den Auffälligkeiten (e4) bis (€7) geht hervor, dass sich die medianen prozentuel- 


len Häufigkeiten, in denen sich die Teilnehmer _ innen positiv wertend/akzeptierend 
oder negativ wertend/ablehnend zu mehreren/uneindeutigen Merkmalen der vier 
Schülerlösungstexte äußerten, die Waage halten (Median positiv wertende/akzeptie- 
rende Äußerungen = 25.0 %; Median negativ wertende/ablehnende Äußerungen = 
17.5 %; kein statistisch signifikanter Medianunterschied), neutrale/gemischte/sons- 
tige Äußerungen zu mehreren/uneindeutigen Schülerlösungstextmerkmalen aber si- 
gnifikant häufiger auftraten (Median = 54.5 %; .50 < ES < .63). Der zuerst genann- 
te Befund lässt sich als Hinweise darauf deuten, dass die Feststellung und Beurtei- 
lung mehrerer/uneindeutiger Schülerlösungstextmerkmale durch die Teilnehmer - 
innen weder in einer tendenziell defizitorientierten, noch einer fähigkeitsorientierten 
Art und Weise stattfand. Im zuletzt genannten Befund zeigt sich ferner die Tendenz, 
dass die Teilnehmer _ innen, wenn sie bei der Korrektur der vier Schülerlösungstex- 
te mehrere/uneindeutige Schülerlösungstextmerkmale fokussierten, vergleichsweise 
häufig nicht und/oder uneindeutig normative Gedankenschritte mitvokalisierten. 


6.3.2.5.7. Quantitative Analyse der medianen prozentuellen Häufigkeiten der Seg- 
mente, die mit den Subsubsubkategorien der Subsubkategorie 3.0.2 (Bezug der 
Verortung) und zusätzlich mit denen der Subsubkategorie 3.0.3 (Art der Äußerung) 
codiert wurden 


In Tabelle 6.28 sind für die Häufigkeiten der Segmente, die mit den Subsubsubkategori- 
en der Subsubkategorie 3.0.2 (Bezug der Verortung) und zusätzlich mit denen der Sub- 
subkategorie 3.0.3 (Art der Äußerung) codiert wurden, die Ergebnisse der in Phase 2c 


vorgenommenen Aufbereitung und Analyse zusammengefasst. Tabelle 6.28 ist analog zu 
Tabelle 6.23 aufgebaut, und daher in identischer Art und Weise zu lesen. 
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Auffalligkeiten in den deskriptiven Kennvverten und Ergebnissen der VVilcoxon- 


Vorzeichen-Rang-Tests 


m den in Tabelle 6.28 aufgeführten Kennwerten zeigen sich die folgenden Auffalligkeiten: 


(¢1) 
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Wurde ein Schülerlösungstext bezüglich eines sachlichen Kriteriums verortet, wurde 
sich von den Teilnehmer innen vor allem entweder positiv wertend/akzeptierend 
(Median = 34.5 %) oder negativ wertend/ablehnend geäußert (Median = 44.0 %). 
Es zeigt sich kein signifikanter Medianunterschied zwischen der prozentuellen Hau- 
figkeit, in der ein Schülerlösungstext bezüglich eines sachlichen Kritierums verortet 
wurde und sich dabei positiv vvertend /akzeptierend geäußert wurde, und jener, in 
der ein Schülerlösungstext bezüglich eines sachlichen Kriteriums verortet wurde und 
sich dabei negativ wertend/ablehend geäußert wurde. Ein starker, statistisch signi- 
fikanter Medianunterschied zeigt sich hingegen zwischen der prozentuellen Häufig- 
keit, in der ein Schülerlösungstext bezüglich eines sachlichen Kriteriums verortet 
wurde und sich dabei neutral/ gemischt /sonstig geäußert wurde, und jener, in der 
ein Schülerlösungstext bezüglich eines sachlichen Kriteriums verortet wurde und 
sich dabei negativ wertend/ablehnend geäußert wurde (ES = .61). Gleiches gilt 
für den Medianunterschied zwischen der prozentuellen Häufigkeit, in der ein Schü- 
lerlösungstext bezüglich eines sachlichen Kriteriums verortet wurde und sich dabei 
neutral/ gemischt /sonstig geäußert wurde, und jener, in der ein Schülerlösungstext 
bezüglich eines sachlichen Kriteriums verortet wurde und sich dabei positiv wer- 
tend/akzeptierend geäußert wurde (ES = .57). 


Wurde ein Schülerlösungstext bezüglich eines anderen Schülerlösungstextes, allge- 
meinen Erfahrungen mit Physiklernenden oder mutmaßlichen Personenmerkma- 
le der des Schülers Sehülerin verortet, wurde sich weder vor allem positiv wer- 
tend/akzeptierend, noch vor allem negativ wertend/ablehnend oder vor allem neu- 
tral/gemischt/sonstig geäußert (mediane prozentuelle Häufigkeit jeweils 0.0 %). Le- 
diglich zwischen der prozentuellen Häufigkeit, in der die Teilnehmer innen einen 
Schülerlösungstext bezüglich allgemeiner Erfahrungen mit Physiklernenden veror- 
teten und sich dabei positiv wertend/akzeptierend äußerten, und jener, in der sie 
sich dabei neutral/gemischt/sonstig äußerten, hatte der durchgeführte Wilcoxon- 
Vorzeichen-Rangtest einen signifikanten Ausgang. Dies lässt sich allerdings auf die 
Streuungsunterschiede zwischen diesen beiden Arten der Äußerung zurückführen 
(IQR. positiv wertende/akzeptierende Äußerungen = 0.0 %; IQR negativ werten- 
de/ablehnende Äußerungen = 100.0 %). 


Wurde ein Schülerlösungstext bezüglich mehr- und/oder uneindeutiger Bezüge ver- 
ortet, wurde sich dabei am häufigsten neutral/gemischt/sonstig geäußert (Median 
= 64.9%). Zwischen der prozentuellen Häufigkeit, in der ein Schülerlösungstext be- 
züglich mehr- und/oder uneindeutiger Bezüge verortet wurde und sich dabei neu- 
tral/gemischt/sonstig geäußert wurde, und jener, in der ein Schülerlösungstext be- 
züglich mehr- und/oder uneindeutiger Bezüge verortet wurde und sich dabei negativ 
wertend/ablehnend geäußert wurde, zeigt sich ein starker, statistisch signifikanter 
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Medianunterschied (ES = .56). Gleiches gilt für die prozentuelle Haufigkeit, in 
der ein Schülerlösungstext bezüglich mehr- und/oder uneindeutiger Bezüge veror- 
tet wurde und sich dabei neutral/gemischt/sonstig geàuBert wurde, und fener, in 
der ein Schülerlösungstext bezüglich mehr- und/oder uneindeutiger Bezüge verortet 
wurde und sich dabei positiv wertend/akzeptierend geäußert wurde (ES = .55). 
Kein statistisch signifikanter Medianunterschied zeigt sich hingegen zwischen der 
prozentuellen Häufigkeit, in der ein Schülerlösungstext bezüglich mehr- und/oder 
uneindeutiger Bezüge verortet wurde und sich dabei positiv wertend/akzeptierend 
geäußert wurde, und jener, in der ein Schülerlösungstext bezüglich mehr- und/oder 
uneindeutiger Bezüge verortet wurde und sich dabei negativ wertend/ablehnend 
geäußert wurde. 


Am häufigsten positiv wertend/akzeptierend äußerten sich die Teilnehmer innen, 
wenn sie einen Schülerlösungstext bezüglich eines sachlichen Kriteriums verorte- 
ten (Median = 34.5 %). Zwischen der prozentuellen Häufigkeit, in der sich positiv 
wertend/akzeptierend geäußert wurde und dabei ein Schülerlösungstexte bezüglich 
eines sachlichen Kriteriums verortet wurde, sowie jener, in der sich positiv wer- 
tend/akzeptierend geäußert wurde und dabei ein Schülerlösungstext auf eine der 
anderen codierten Arten verortet wurde, zeigt sich — mit Ausnahme eines Bezugs zu 
mutmaßlichen Personenmerkmalen des der Schüler in — jeweils ein moderater bis 
starker, statistisch signifikanter Medianunterschied (.34 < ES < .58). Des Weiteren 
zeigt sich ein moderater, statistisch signifikanter Medianunterschied zwischen der 
prozentuellen Häufigkeit, in der sich positiv wertend/akzeptierend geäußert wur- 
de und dabei ein Schülerlösungstextes bezüglich allgemeiner Erfahrungen mit Phy- 
siklernenden verortet wurde, sowie jener, in der sich positiv vvertend /akzeptierend 
geäußert wurde und dabei die Verortung eines Schülerlösungstext mehr- und/oder 
uneindeutig war (ES = .40). 


Am häufigsten negativ wertend/ablehnend äußerten sich die Teilnehmer innen, 
wenn sie einen Schülerlösungstext bezüglich eines sachlichen Kriteriums verorte- 
ten (Median = 44.0 %). Zwischen der prozentuellen Häufigkeit, in der sich nega- 
tiv wertend/ablehnend geäußert wurde und dabei ein Schülerlösungstext bezüglich 
eines sachlichen Kriteriums verortet wurde, sowie jener, in der sich negativ wer- 
tend/ablehnend geäußert wurde und dabei ein Schülerlösungstext auf eine der an- 
deren codierten Arten verortet wurde, zeigt sich jeweils ein moderater, statistisch 
signifikanter Medianunterschied (.40 < ES < .61). Des Weiteren zeigt sich ein 
moderater, statistisch signifikanter Medianunterschied zwischen der prozentuellen 
Häufigkeit, in der sich negativ wertend/ablehnend geäußert wurde und dabei ein 
Schülerlösungstext bezüglich eines anderen Schülerlösungstextes verortet wurde, so- 
wie jener, in der sich negativ wertend/ablehnend geäußert wurde und dabei die 
Verortung eines Schülerlösungstext mehr- und/oder uneindeutig war (ES = .36). 


Am häufigsten neutral/gemischt/sonstig äußerten sich die Teilnehmer _ innen, wenn 
sie bei einen Schülerlösungstext mehr- und/oder uneindeutige Bezüge der Veror- 
tung heranzogen (Median = 64.9 %). Zwischen der prozentuellen Häufigkeit, in 
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der sich neutral/ gemischt /sonstig geäußert wurde und dabei mehr- und/oder un- 
eindeutige Bezüge der Verortung heranzogen wurden, sowie jener, in der sich neu- 
tral/gemischt/sonstig geäußert wurde und dabei ein Schülerlösungstext auf eine der 
anderen codierten Arten verortet wurde, zeigt sich — mit Ausnahme eines Bezugs zu 
allgemeinen Erfahrungen mit Physiklernenden — Jeweils ein moderater bis starker, 
statistisch signifikanter Medianunterschied (.43 < ES < .62). 


Interpretation: quantitative Teilbefunde 


Die eben aufgeführten Auffälligkeiten (Ç1) bis (¢6) lassen alles in allem die folgenden 


Interpretationen zu: 


1. 


286 


In Auffalligkeit (¢1) zeigt sich, dass sich die Häufigkeit positiv wertender/akzep- 
tierender und negativ wertender/ablehnender Äußerungen in etwa die Waage hält, 
unabhängig davon, ob der Bezug der Verortung sachliche Kriterien sind, oder ob 
ein mehr- und/oder uneindeutiger Bezug der Verortung herangezogen wurde. Dies 
lässt sich als Hinweis darauf deuten, dass die Leistungsfeststellungen und -beurtei- 
lungen der Teilnehmer innen bezüglich dieser beiden Arten der Verortung weder in 
einer tendenziell defizitorientierten, noch einer fähigkeitsorientierten Art und Weise 
stattfand. 


. Aus den Auffälligkeiten (¢4) und (€5) wird deutlich, dass positiv wertende/akzep- 


tierende bzw. negativ wertende/ablehnende Äußerungen bei mehr- und/oder un- 
eindeutigen Bezügen der Verortung signifikant weniger häufig auftraten (Median 
positiv wertende/akzeptierende Äußerungen = 19.0 %; Median negativ werten- 
de/ablehnende Äußerungen = 21.7 %), als dies bei einem Bezug zu sachlichen Kri- 
terien der Fall war (Median positiv wertende/akzeptierende Äußerungen = 34.5 %; 
Median negativ wertende/ablehnende Äußerungen = 44.0 %). Hier zeigt sich also 
die Tendenz, dass die Teilnehmer _ innen, wenn sie sachliche Kriterien als Bezug der 
Verortung heranzogen, zu diesen auch vergleichsweise häufig eindeutig normative 
Gedankenschritte mitvokalisierten. 


. Aus Auffälligkeit (€3) und ((6) wird deutlich, dass neutrale/gemischte/sonstige Au- 


Berungen bei mehr- und/oder uneindeutigen Bezügen der Verortung signifikant häu- 
figer auftraten (Median = 64.9 %), als dies bei einem Bezug zu sachlichen Kriterien 
der Fall war (Median = 18.6 %). Hier zeigt sich also die Tendenz, dass die Teilneh- 
mer innen, wenn sie mehr- und/oder uneindeutige Bezügen der Verortung heran- 
zogen, zu diesen auch vergleichsweise häufig nicht und/oder uneindeutig normative 
Gedankenschritte mitvokalisierten. 


. In Auffalligkeit (Ç2) zeigt sich, dass bezüglich anderer Schülerlösungstexte, allgemei- 


nen Erfahrungen mit Physiklernenden und mutmaßlichen Personenmerkmalen des - 
der Schülers Schülerin als Bezüge der Verortung keine Aussagen getroffen werden 
können. Grund hierfür ist, dass die prozentuelle Häufigkeit, in der sich die Teilneh- 
mer _ innen im Median bei einer der eben benannten Arten der Verortung positiv 
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wertend/akezptierend, negativ wertend/ablehenend oder neutral/gemischt/sonstig 
geàuBert wurde jeweils 0.0 % betragt. 


6.3.2.5.8. Limitation und Zwischenfazit 

Wie im vorangegangenen Unterabschnitt dargestellt, konnten mittels einer quantitativen 
Analyse der Haufigkeit besonders reichhaltiger Codierungen ausgewahlte inhaltliche Fa- 
cetten der Laut-Denk-Protokolle aller Teilnehmer _ innen systematisch beschrieben und im 
Sinne der Forschungsfragen (F1) und (F2) interpretiert werden. Als besonders reichhal- 
tig wurden die Codingkombinationen aus den (Sub- )Subsubkategorien der Subkategorie 
„Feststellung und Beurteilung eines Schülerlösungstextes“, sowie den zusätzlichen Kate- 
gorien „Auseinandersetzung mit Schülerlösungstext A“, „B“, „C“ und „D“ angesehen. 
Im Rahmen von Phase 2c der inhaltsanalytischen Auswertung der Laut-Denk-Protokolle, 
konnten die im Folgenden zusammengefassten Befunde gewonnen werden: 


e Erstens lieferte die Analyse empirische Hinweise auf eine Beeinflussung des Pro- 
zesses der Leistungsurteilsgenese durch die fachlich-konzeptuelle Qualität und die 
sprachliche Realisierung der Schülerlösungstexte. 


o Zum einen beeinflusste die fachlich-konzeptuelle Qualität und die sprachliche 
Realisierung, in welchem Umfang die Teilnehmer innen welche Merkmale ei- 
nes Schülerlösungstextes (fachlich-konzeptueller Eindruck, sprachliche Reali- 
sierung, sonstige Merkmale) im Rahmen ihrer Leistungsurteilsgenese berück- 
sichtigen. Hierbei weist die im Median häufigere Fokussierung des fachlich- 
konzeptuellen Eindrucks bei den Schülerlösungstexten mit geringer fachlich- 
konzeptueller Qualität auf eine zum Teil defizitorientierte Feststellung und 
Beurteilung fachlich-konzeptueller Schülerleistungen hin. Des Weiteren deutet 
sich in der im Median häufigeren Fokussierung der sprachlichen Realisierung 
bei Schülerlösungstexten mit hoher fachlich-konzeptueller Qualität an, dass 
die Teilnehmer_ innen die Feststellung und Beurteilung der sprachlichen Rea- 
lisierung eines Schülerlösungstextes vor allem dann vornehmen, wenn dieser 
bis zu einem bestimmten Grad auch ihren fachlich-konzeptuellen Erwartun- 
gen entspricht. Dies lässt sich als empirischer Hinweis auf eine Konfundierung 
fachlich-konzeptueller und sprachlicher Leistungsfeststellung und -beurteilung 
interpretieren (Forschungsfrage (F2)). 


o Zum anderen hatten die fachliche-konzeptuelle Qualität und die sprachliche 
Realisierung einen Einfluss darauf, inwieweit sich die Teilnehmer innen bei 
der Korrektur eines positiv wertend/akzeptierend, negativ vvertend /ablehnend 
oder neutral/gemischt/sonstig äußerten. Insbesondere zeigt sich in den Me- 
dianunterschieden der prozentuellen Häufigkeit positiv wertender/akzeptieren- 
der bzw. negativ wertender/ablehender Äußerungen je Schülerlösungstext ana- 
log zur Punkteverteilung der Teilnehmer _ innen (vgl. Unterabschnitt 6.3.1) ein 
empirischer Hinweis auf eine Konfundierung fachlich-konzeptueller und sprach- 
licher Leistungsurteilsgenese. 
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e Zweitens zeigten sich bei den Teilnehmer innen deutliche empirische Hinweise für 
eine Orientierung an der kriterialen Bezugsnorm bei der Leistungsurteilsgenese über 
einen bestimmten Schülerlösungstext, bzw. wenn sie bestimmtes Schülerlösungstext- 
merkmal (fachlich-konzeptueller Eindruck, sprachliche Realisierung, sonstige Merk- 
male) feststellen und beurteilen. Nicht auszuschließen ist allerdings, dass es sich 
hierbei aber in Teilen um Artefakte der Laborsituation handelt. 


e Drittens ließen sich empirische Hinweise auf unterschiedliche Tendenzen hinsichtlich 
einer Fähigkeiten- oder Defizitorientierung identifizieren, je nachdem welche Schü- 
lerlösungstextmerkmale die Teilnehmer innen bei der Leistungsfeststellung und 
-beurteilung fokussieren. Für die Feststellung und Beurteilung fachlich-konzeptueller 
Schülerleistungen zeigt sich dabei eine deutliche Tendenz zur einer Fähigkeitsorien- 
tierung (im Median waren 51.4 % der Äußerungen zum fachlich-konzeptuellen Ein- 
druck der vier Schülerlösungstexte positiv wertend/akzeptierend). Für sprachliche 
Schülerleistungen konnte hingegen eine deutliche Tendenz zur Defizitorientierung 
ausfindig gemacht werden (im Median waren 69.6 % der Äußerungen zur sprachli- 
chen Realisierung der vier Schülerlösungstexte negativ wertend/ablehnend). 


Bei den im vorangegangenen Unterabschnitt dargestellten Befunden handelt es sich um 
mittlere Tendenzen in der Logik des Handelns aller 21 Teilnehmer innen im Rahmen der 
Laborsituation der Hauptstudie. Aus diesen Befunden lassen sich daher keine Aussagen 
über die Leistungsurteilsgenese einzelner Teilnehmer _ innen treffen. Des Weiteren ist an- 
zumerken, dass sich keinen Aussagen darüber treffen lassen, inwieweit die dargestellten 
Tendenzen für den gesamten Leistungsurteilsgenese der Teilnehmer _ innen im Rahmen der 
Laborsituation von tragender Bedeutung waren. Grund hierfür ist, dass für die in Phase 
2c vorgenommenen Analyse lediglich ausgewählte Codierungen der Laut-Denk-Protokolle 
der Teilnehmer innen herangezogen wurden. 


6.4. Analyse der Daten aus den retrospektiven 
Befragungen 


In diesem Unterkapitel werden die Analysen der Daten aus den retrospektiven Befra- 
gungen und die hierbei gewonnenen Teilbefunde vorgestellt. Dem Mixed-Methods-Tri- 
angulationsdesign zur geplanten Auswertung der in der Hauptstudie erhobenen Daten 
entsprechend (vgl. Abschnitt 5.4.2) gliedert sich dieses Unterkapitel in die folgenden Ab- 
schnitte: 


Abschnitt 6.4.1: Eine qualitative Analyse der Verbaldaten der 21 Teilnehmer_ innen zu 
den Paarvergleichen mittels eines inhaltsanalytischen Vorgehens. 


Abschnitt 6.4.2: Eine quantitative Analyse der Entscheidungen der 21 Teilnehmer im- 
nen bezüglich der fachlich-konzeptuellen Qualität bzw. der Qualität der 
sprachlichen Realisierung der Schülerlösungstexte in den Paarverglei- 
chen. 
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Analog zum Vorgehen in Unterkapitel 6.3 beginnt jeder dieser Abschnitte zunachst mit 
methodischen Vorbemerkungen, in denen das zur Analyse des entsprechenden Teilda- 
tensatzes verwendete Auswertungsverfahren beschrieben wird. Anschließend erfolgt eine 
Darstellung der Ergebnisse, sowie eine Interpretation der gewonnenen Befunde zu For- 
schungsfrage (F1) und/oder (F2). Jeder Abschnitt endet mit einer Darstellung der Limi- 
tationen der gewonnenen Teilbefunde. 


6.4.1. Qualitative Analyse der Verbaldaten aus den retrospektiven 


Befragungen!*® 


6.4.1.1. Methodische Vorbemerkungen 


Wie in Abschnitt 5.4.1 beschrieben, wurden den Teilnehmer_innen in der retrospekti- 
ven Befragung die von ihnen bereits korrigierten vier Schülerlösungstexte noch einmal 
paarweise vorgelegt. Dabei erhielten sie (erstmalig explizit) die Instruktion einzuschätzen 
und zu begründen, ob einer der beiden ihnen vorliegenden Schülerlösungstexte „fachlich 
[bzw. sprachlich] besser ist, oder ob sie fachlich [bzw. sprachlich] gleich gut sind“ (An- 
hang C.3 Durchführungsmanual, S. 9). Zudem sollten die Teilnehmer _ innen hierbei außer 
Acht lassen, „[o]b evtl. eine der beiden Antworten sprachlich [bzw. fachlich] besser ist“ 
(ebd.; zur Illustration siehe Transkriptauszug in Tabelle 6.29). Dieser Teil der retrospekti- 
ven Befragung wird im Folgenden als fachlich-konzeptuelle und sprachliche Paarvergleiche 
bezeichnet. 


Ziel der qualitativen Analyse der Daten aus den retrospektiven Befragungen war es, die 
Einschätzungen der Teilnehmer _ innen im Rahmen der fachlich-konzeptuellen und sprach- 
lichen Paarvergleiche, sowie die Beurteilsungskriterien, welche die Teilnehmer innen für 
die Begründung ihrer Einschätzung herangezogen haben, aus den erhobenen Verbaldaten 
herauszuarbeiten. Aufgrund dessen erfolgte die Analyse durch eine inhaltlich strukturie- 
rende qualitative Inhaltsanalyse nach Mayring (2015), da diese Variante der qualitativen 
Inhaltsanalyse speziell dafür ausgelegt ist... 


„[...] bestimmte Themen, Inhalte, Aspekte aus dem Material herauszufiltern und zusam- 
menzufassen. Welche Inhalte aus dem Material extrahiert werden sollen wird durch theo- 
riegeleitet entwickelte Kategorien und (sofern notwendig) Unterkategorien bezeichnet. Nach 
der Bearbeitung des Textes mittels des Kategoriensystems [...| wird das in Form von Pa- 
raphrasen extrahierte Material zunächst pro Unterkategorie, dann pro Hauptkategorie zu- 
sammengefasst.* (ebd., S. 103) 


In den folgenden Unterabschnitten wird zunächst das genaue Vorgehen bei der inhalt- 
lich strukturierenden qualitativen Inhaltsanalyse der erhobenen Verbaldaten beschrieben. 
Anschließend erfolgt die Darstellung der durch dieses Vorgehen gewonnenen Erkenntnisse. 


146 Teile dieses Abschnitts stellen eine überarbeitete und erweiterte Fassung von Feser & Höttecke (2017a) 
dar. 
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Lea] 

Leitung: Beurteilen Sie, ob eine der beiden Antworten sprachlich besser ist, oder 
ob sie sprachlich gleich gut sind. Ob eventuell eine der beiden Antworten 
fachlich besser ist, soll hierbei komplett unberücksichtigt bleiben. Bitte 
begründen Sie Ihre Entscheidung. 

Leitung: Also es geht jetzt nicht mehr darum... 

Herr Carboni: Es geht um die Sprache, nicht um die Inhalte. 

Leitung: Genau. Und vir fangen vieder an mit A und B. 


Herr Carboni: Sprachlich ist auf jeden Fall B besser. A ist sehr legere Alltagssprache. 


Formal... Also Satzbau beziehungsveise Ausdruck ist da vesentlich schlechter. 
Zum Teil... Also sprachlich ist auf jeden Fall Antvort B besser. 
Leitung: Okay. A und C jetzt mal im Vergleich. 


Herr Carboni: Auch hier ist für mich eindeutig Antwort C, die sprachlich qualitativ bessere 
Version. Vollständige Sätze, kurze Sätze, Syntax, Grammatik, alles in Ordnung. 


[ss] 


Tabelle 6.29.: Auszug aus dem segmentierten Transkript der retrospektiven Befragung 
von Herrn Carboni. 


6.4.1.2. Erlauterungen zum Vorgehen bei der inhaltlich strukturierenden 
qualitativen Inhaltsanalyse 


Wie Abbildung 6.19 schematisch veranschaulicht, làsst sich die inhaltlich strukturierende 
qualitative Inhaltsanalyse der Verbaldaten aus der retrospektiven Befragung in insgesamt 
5 Schritte unterteilen: 


Im ersten Schritt wurde der Leitfaden der retrospektiven Befragung (vgl. Anhang C.3 
Durchführungsmanual, S. 8 u. f.) in ein deduktives Kategoriensystem überführt. Dieses 
Kategoriensystem ist in Tabelle 6.30 dargestellt. Dessen hierarchische Struktur entspricht 
den beiden Instruktionen, die die Teilnehmer innen für die Paarvergleiche der Schülerlö- 
sungstexte erhalten haben (vgl. Anhang C.3 Durchführungsmanual, S. 9), den 6 Paarver- 
gleichen, die die Teilnehmer_innen pro Instruktion vorgenommen haben, sowie den drei 
möglichen Einschätzungen, die ein e Teilnehmer_in je Paarvergleich vornehmen konnte 
(z. B. Sehülerlösungstext A ist sprachlich besser als B; Schülerlösungstext A ist sprachlich 
schlechter als B; Sehülerlösungstext A und B sind sprachlich gleich gut). Das Katego- 
riensystem besteht daher aus insgesamt 2 Kategorien, mit jeweils 6 Subkategorien, die 
wiederum aus jeweils 3 Subsubkategorien aufgebaut sind (vgl. Tabelle 6.30). 


Im zweiten Schritt wurden die Transkripte der retrospektiven Befragung aller Teilneh- 
mer innen mit Hilfe des zuvor entwickelten Kategoriensystems codiert. Wie in Unter- 
kapitel 6.2 beschrieben und im Transkriptauszug in Tabelle 6.29 illustriert, wurden die 
Basistranskripte der retrospektiven Befragung in die Fragen der Leitung und Antvvor- 
ten der Teilnehmer innen segmentiert. Für die Codierung der Transkripte wurden die 
Segmente, in denen ein e Teilnehmer in einen Paarvergleich vornimmt (also die voll- 
ständigen Antworten der Teilnehmer innen zu einer Frage der Leitung) als Codiereinhei- 
ten definiert. Zudem wurde die Codierregel festgelegt, dass jeder Codiereinheit genau eine 
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Subkategorien Subsubkatgeorien 


A ist besser als B (A>B) 
Sehülerlösungstext A und B A ist schlechter als B (A<B) 
A & B sind gleich gut (A=B) 


A ist besser als C (A>C) 
Sehülerlösungstext A und C A ist schlechter als C (A<C) 
A & C sind gleich gut (A=C) 


A ist besser als D (A>D) 
Paarvergleiche der Sehülerlösungstext A und D A ist schlechter als D (A <D) 
Schülerlósungstexte bezüglich A & D sind gleich gut (A—D) 


ihrer fachlich-konzeptuellen B ist besser als C (B>C) 
Qualitat Sehülerlösungstext B und C B ist schlechter als C (B<C) 
B & C sind gleich gut (B=C) 


B ist besser als D (B>D) 
Sehülerlösungstext B und D B ist schlechter als D (B<D) 
B & D sind gleich gut (B=D) 


C ist besser als D (C>D) 
Sehülerlösungstext C und D C ist schlechter als D (C<D) 
C & D sind gleich gut (C=D) 


A ist besser als B (A>B) 
Sehülerlösungstext A und B A ist schlechter als B (A<B) 
A & B sind gleich gut (A=B) 


A ist besser als C (A>C) 
Schiilerlosungstext A und C A ist schlechter als C (A<C) 
A & C sind gleich gut (A=C) 


A ist besser als D (A>D) 
: Schülerlósungstext À und D A ist schlechter als D (A<D 
Paarvergleiche der 
Schülerlósungstexte bezüglich A & D sind gleich gut (A=D) 


der Qualität ihrer sprachlichen B ist besser als C (B>C) 
Realisierung Schülerlösungstext B und C B ist schlechter als C (B<C) 
B & C sind gleich gut (B=C) 


B ist besser als D (B>D) 
Sehülerlösungstext B und D B ist schlechter als D (B<D) 
B & D sind gleich gut (B—D) 


C ist besser als D (C>D) 
Sehülerlösungstext C und D C ist schlechter als D (C<D) 
C & D sind gleich gut (C—D) 


Tabelle 6.30.: Deduktives Kategoriensystem zur Analyse der Verbaldaten der retrospek- 
tiven Befragung. 
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Subsubkategorie des Kategoriensystems zuzuweisen ist. Beispielsvveise wurden die Seg- 
mente 477 und 479 im in Tabelle 6.29 dargestellt Transkriptauszug mit den Subsubkate- 
gorien ,,A ist schlechter als B“ bzw. ,,A ist schlechter als C“ der Kategorie ,,Paarvergleiche 
der Schülerlösungstexte bezüglich der Qualität ihrer sprachlichen Realisierung“ codiert. 


Anschließend wurde die Codierung der Paarvergleiche in den Transkripten einer Quali- 
tätskontrolle unterzogen. Dies geschah, indem überprüft wurde, ob die Codierungen mit 
den dementsprechenden Mitschriften der Leitung während der Paarvergleiche (vgl. Ab- 
schnitt 5.4.1; Anhang C.3 Durchführungsmanual, S. 9) übereinstimmen”. Als Maß für 
diese Überstimmung wurde sowohl für die fachlich-konzeptuellen, als auch für die sprach- 
lichen Paarvergleiche — also für jede Kategorie des Kategoriensystems — jeweils der von 
Brennan & Prediger (1981) vorgeschlagene «-Koeffizient bestimmt (vgl. auch Unterab- 
schnitt 6.3.2.2). Für die fachlich-konzeptuellen Paarvergleiche ergab sich eine perfekte 
Übereinstimmung zwischen der Codierung der Transkripte und den entsprechenden Lei- 
tungsmitschriften während der retrospektiven Befragung (x = 1.00). Bei den sprachlichen 
Paarvergleichen zeigten sich hingegen minimale Abweichungen (x = .97). Diese Abwei- 
chungen konnten auf einen Fehler im Transkript von Herrn Balke und eine einzelne feh- 
lerhafte Mitschrift bei den sprachlichen Paarvergleichen von Herrn Jonuzi zurückgeführt 
werden. Nach Bereinigung dieser Fehler ergab sich auch für die sprachlichen Paarver- 
gleiche eine perfekte Übereinstimmung zwischen der Codierung der Transkripte und den 
entsprechenden Leitungsmitschriften. 


Entsprechend dem von Mayring (2015) vorgeschlagenen Vorgehen erfolgte im dritten bis 
fünften Schritt der inhaltlich strukturierenden qualitativen Inhaltsanalyse das Herausfil- 
tern und Zusammenfassen der von den Teilnehmer innen bei den Paarvergleichen ver- 
wendeten Beurteilungskriterien aus den zuvor codierten Transkriptstellen: 


Im dritten Schritt wurde zunächst eine regelgeleitete Paraphrasierung vorgenommen. Wie 
in Abbildung 6.20 exemplarisch veranschaulicht wurden hierbei in jeder zuvor codierten 


Transkriptstelle „nicht (oder wenig) inhaltstragende['**] Textbestandteile [ausgelassen] 
[...] [und nur] die inhaltstragenden Textstellen [wurden] auf eine einheitliche Sprachform|,| 
[...] [in] grammatikalischelr] Kurzform [transformiert|“ (Mayring, 2015, S. 72). Hierdurch 
wurde für jeden Paarvergleich aller Teilnehmer _ innen eine paraphrasierte und gekürz- 
te Version ihrer vorgenommenen Einschätzung und der von ihnen hierbei angeführten 
Beurteilungskriterien gewonnen. 


Anschließend wurden alle Paraphrasen, die aus Transkriptstellen hervorgingen und mit 
einer bestimmten Subsubkategorie des Kategoriensystems codiert wurden, fallübergrei- 


fend zusammengefasst (vierter Schritt). Dabei wurden bedeutungsgleiche aber unter- 
schiedlich formulierte Paraphrasen sprachlich vereinheitlicht, sowie bedeutungsähnliche 
Paraphrasen gebündelt und in eine generalisierte Paraphrase überführt (vgl. Mayring, 
2015, S. 72). Hierdurch wurde für jede Einschätzung, die die Teilnehmer innen bei den 


HTDas Ergebnis der Codierung nach der durchgeführten Qualitätskontrolle ist in Anhang F für die ein- 
zelnen Teilnehemer_ innen tabellarisch zusammengefasst. 

148 Als nicht (oder wenig) inhaltstragende Textteile wurden solche festgelegt, in denen der. die Teilneh- 
mer in keine Beurteilungskriterien für seine _ihre vorgenommene Einschätzung expliziert. 
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codierte Transkriptstellen Paraphrasierung der codierten Stellen 


Subsubkategorienebene Kategorienebene 


Frau Kirik; Subsubkategorie: Schülerlösungstext Frau Kirik; Subsubkategorie: Schülerlösungstext Subsubkategorie: Schülerlösungstext Kategorie: Paarvergleiche bzgl. der 
A ist sprachlich schlechter als B A ist sprachlich schlechter als B A ist sprachlich schlechter als B sprachlichen Realisierung 


A und B. (...) Da, wenn man das jetzt so beurteilt, 
dann vürd- ich sagen, diese Antvort B ist ja nicht 


richtig, aber ühm es ist natürlich von der Sprache Für Frau Kirik ist Schülerlösungstext A sprachlich 


Da wird ein Komma schlechter als B, weil... 
Schülerlösungstext A wird als sprachlich 
schlechter angesehen als 

eben fachlich richtig ist (Leitung: Mhm.). Da dreht 


sich's tatsächlich um, ja. Wahrscheinlich sind die 


... weil Schülerlösungstext B aus „vernünftigen“ Sätzen Schülerlösungstext B, weil... 


besteht [ 


Antworten ja auch so gemacht, dass man so antworten 
soll (lacht). 


Frau Pinna; Subsubkategorie: Schülerlösungstext 
A ist sprachlich schlechter als B 


Frau Pinna; Subkategorie: Schülerlösungstext 
A ist sprachlich schlechter als B 


Für Frau Pinna ist Schülerlösungstext A sprachlich 


(...) Also sprachlich find- ich B besser. (Leitung: Beurteilungskriterien, die verwendet 


schlechter als B, weil... ... in Schülerlösungstext A unangemesse- 


ch zvvei 


vollständige Sätze. wurden, um zu begründen, das: 


ne/ungenaue Ausdrücke verwendet 


... in Schülerlösungstext A „Wortgruppen“ wie z. B. Schülerlösungstexte (nicht) bzgl. der 


vernünftich. Ähm (..) hier sind die... die... di kommt aber der Ton durch die Helme“ verwendet 
Wortgruppen halt also... über Glas geht... wurden. 


werden (z. B. „Ton kommt“). 


Qualitat ihrer sprachlichen Realisierung 


... weil in Schülerlósungstext B ganze/ voneinander unterscheiden: 


über Glas geht... das sind so Formulierungen. (.) 
Ähm dann kommt der Ton durch die Wand... äh kommt 
aber der Ton durch die Helme... find- ich sprachlich 
(.) sch-... deutlich schwächer als B. 


wurden. 


... in Schülerlösungstext_B 


tionen gebildet wurden. 


o Korrektheit/Angemessenheit von 


(fachsprachlien) VVortkombinationen 


Korrektheit / Angemessenheit des 


Satzbaus 


Herr Dassow; Subsubkategorie: Schülerlösungstext Herr Dassow; Subsubkategorie: Schülerlösungstext Subsubkategorie: Schülerlösungstext 
A und D sind sprachlich gleichgut A und D sind sprachlich gleichgut A und D sind sprachlich gleichgut 


Ja da wird's jetzt ah... Bei D steht ja auch so etwas Sehülerlösungstext A und D werden als 


i i it: Di i i R. en 3 E al a spr: 
in Zeile 2. Etwas mit: Die Frequenz ist nicht gut Für Herrn Dassow sind Schülerlösungstext A und D P 
genug. Ja „gut genug" ist dann immer sowas: Was ist 


achlich gleichgut angesehen, weil... 


sprachlich gleichgut, weil... [ 


jetzt quasi mit gut genug gemeint?” Das ist so 
ungefähr wie hier oben mit im All ist nichts durch ... in beiden Schülerlösungstexten Ausdrücke wie z. B. ... in beiden Schülerlösungstexten unange- 


das Ton geht. Ähm ich find- sie da tatsächlich, dann ut ge vendet wurden. messene/ungenaue Ausdrücke ver- 
beide gleichwertig. wendet werden (z. B. „Ton geht“, „die 


Frequenz ist gut“). 


Abbildung 6.20.: Exemplarische Veranschaulichung des Vorgehens, mit dessen Hilfe aus den codierten Transkriptstellen die bei den 
Paarvergleichen verwendeten Beurteilungskriterien gewonnen wurden. Die verschiedenen Unterstreichungen verdeut- 
lichen, welche Textteile im Analyseprozess paraphrasiert bzw. zusammengefasst wurden. 
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Paarvergleichen vorgenommen haben, eine erste fallübergreifende Zusammenfassung der 
herangezogenen Beurteilungskriterien gevvonnen (exemplarisch veranschaulicht in Abbil- 
dung 6.20). 


Im fünften und letzten Schritt wurden die zuvor gewonnenen ersten fallübergreifenden 
Zusammenfassungen vveiter zusammengefasst. Diese zvveite fallübergreifende Zusammen- 
fassung erfolgte auf Ebene der beiden Kategorien des Kategoriensystems, mit dem die 


Transkripte codiert wurden. Dabei wurde analog zu dem im vierten Schritt der inhaltlich 
strukturierenden qualitativen Inhaltsanalyse angewandten Vorgehen vorgegangen (sprach- 
liche Vereinheitlichungen bedeutungsgleicher Paraphrasen: Bündelung bedeutungsahnli- 
cher Paraphrasen). Hierdurch vvurde eine fallübergreifende Zusammenfassung der Beur- 
teilungskriterien gewonnen, mit denen die Teilnehmer innen begründeten, dass sich zwei 
Schülerlösungstexte (nicht) bezüglich... 


.. ihrer fachlich-konzeptuellen Qualität... 


... der Qualität ihrer sprachlichen Realisierung... 


... voneinander unterscheiden (exemplarisch veranschaulicht in Abbildung 6.20; in Unter- 
abschnitt 6.4.1.3 erfolgt eine detaillierte Darstellung). 


Um im dritten, vierten und fünften Schritt der inhaltlich strukturierenden qualitativen In- 
haltsanalyse die intersubjektive Nachvollziehbarkeit der Analyse sicherzustellen, wurden 
die Zwischenergebnisse, die in diesen Schritten gewonnen wurden, jeweils einem soge- 
nannten Peer Debriefing unterzogen. Hierbei handelt es sich um eine diskursive Form der 
Herstellung von intersubjektiver Nachvollziehbarkeit (vgl. Steinke, 1999, S. 214), die sich 
nach Lincoln & Guba (1985) allgemein beschreiben lässt als... 


əl the process of exposing oneself to a disinterested peer in a manner paralleling an 
analytic session and for the purpose of exploring aspects of the inquiry that might otherwise 
remain only implicit within the inquirer’s mind“ (ebd., S. 308) 


Die im Anschluss an den dritten, vierten und fünften Schritt der inhaltlich strukturieren- 
den qualitativen Inhaltsanalyse durchgefiihrten Peer Debriefings erfolgten in Zusammen- 
arbeit mit Mitgliedern der Arbeitsgruppe Physikdidaktik der Universitat Hamburg, sowie 
Mitgliedern der Arbeitsgemeinschaft qualitative Inhaltsanalyse der Graduiertenschule der 
Fakultät für Erziehungswissenschaft der Universitat Hamburg. Den Teilnehmer innen der 
Peer Debriefings wurde zunächst die Vorgehensweise, mit dem die zu diskutierenden Zwi- 
schenergebnisse gewonnen wurden, erläutert. Anschließend wurde gemeinsam diskutiert, 
inwieweit die vorliegenden Zwischenergebnisse hinreichend präzise, sowie umfänglich for- 
muliert sind, sodass sie eine „(kritische) Verständigung |[...] zwischen Forscher (der eine 
Studie durchführt) und Leser (der Studie) [...] ermöglichen“ (Steinke, 1999, S. 207), sowie 
dementsprechend gemeinschaftlich umformuliert, ergänzt oder gekürzt. 
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6.4.1.3. Befunde der inhaltlich strukturierenden qualitativen Inhaltsanalyse 


Die Ergebnisse der imhaltlich strukturierenden qualitativen Inhaltsanalyse sind in den 
Tabellen 6.31 bis 6.34 dargestellt. 


In Tabelle 6.31 und 6.32 sind die Beurteilungskriterien aufgelistet, die die Teilnehmer in- 
nen im Rahmen der fachlich-konzeptuellen und sprachlichen Paarvergleiche verwendeten, 
um ihre Entscheidungen zu begründen. Ferner ist sowohl in Tabelle 6.31, als auch in Ta- 
belle 6.32 für jedes Beurteilungskriterium jeweils ein exemplarischer fachlich-konzeptueller 
bzw. sprachlicher Paarvergleich eines einer Teilnehmers "Teilnehmerin angegeben, in dem 
dieses Beurteilungskriterium für die Begründung einer Einschatzung herangezogen wurde. 


In den Tabellen 6.33 und 6.34 sind erstens die absoluten Codehaufigkeiten der Subsub- 
kategorien des Kategoriensystems, mit dem die Paarvergleiche codiert wurden, aufge- 
führt. Diese entsprechen der Anzahl an Teilnehmer innen, die im Rahmen der fachlich- 
konzeptuellen bzw. sprachlichen Paarvergleiche zu einer bestimmten Einschatzung gelangt 
sind. Zweitens ist in Tabellen 6.33 und 6.34 aufgeführt, wie viele der 21 Teilnehmer_innen 
ein bestimmtes Beurteilungskriterien für welche Einschatzungen im Rahmen der Paarver- 
gleiche herangezogen haben. Diese Information wurde aus den Zvrischenergebnissen der 
inhaltlich strukturierenden qualitativen Inhaltsanalyse gewonnen, indem zurückverfolgt 
wurde, welche Paraphrasen aus dem dritten Analyseschritt, im fünften Schritt zu vvel- 
chem Beurteilungskriterium zusammengefasst wurden. Drittens ist in beiden Tabellen 
hervorgehoben, welche Einschatzungen bei den fachlich-konzeptuellen bzw. den sprachli- 
chen Paarvergleichen, mit der kontrastierenden Auswahl der vier Schülerlösungstexte im 
Rahmen der Entwicklungsstudie übereinstimmen (vgl. Abschnitt 5.3.4). 


Alles in allem zeigen sich in den Tabellen 6.31 bis 6.34 die folgenden Befunde: 


1. Bei den fachlich-konzeptuellen Paarvergleichen haben die Teilnehmer _innen insge- 
samt 13 verschiedene Beurteilungskriterien für die Begründung ihrer Einschätzung 
herangezogen (vgl. Tabelle 6.31), wohingegen sie ftir die sprachlichen Paarverglei- 
che insgesamt 20 verschiedene Beurteilungskriterien verwendeten (vgl. Tabelle 6.32). 
Insbesondere haben die Teilnehmer _innen die folgenden 7 Beurteilungskriterien so- 
wohl bei den fachlich-konzeptuellen, als auch bei den sprachlichen Paarvergleichen 
eingesetzt: 


(i) Die Differenziertheit / Komplexitat des Textes 

(ii) Die Entsprechung der persönlichen Erwartungen 
(dii) Die Qualitat der (Fach- )Sprache 
(iv) Die Quantität an Fachwörtern 
(v 
(vi) Der/Die Verdichtungsgrad/Präzision des Textes 


Die Strukturiertheit/Gliederung des Textes 


) 
) 
) 
) 
) 
(vii) Das Vorhandensein von Redundanz 
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Es lässt sich daher vermuten, dass die Teilnehmer_innen auch in ihrem Berufsall- 
tag für die Feststellung und Beurteilung von fachlich-konzeptuellen und sprachli- 
chen Schiilerleistungen zum Teil auf dieselben Beurteilungskriterien zurückgreifen 
(Forschungsfrage (F1)), womit insbesondere das Potenzial für eine Konfundierung 
fachlich-konzeptueller und sprachlicher Schülerleistungen einhergeht (Forschungs- 
frage (F2)). 


2. Wie durch einen Vergleich von Tabelle 6.31 und 6.32 deutlich wird, sind einige der 
von den Teilnehmer innen verwendeten Beurteilungskriterien eher als holistisch 
zu bezeichnen. Dies betrifft insbesondere diejenigen Beurteilungskriterien, die so- 
wohl bei den fachlich-konzeptuellen, als auch bei den sprachlichen Paarvergleichen 
eingesetzt wurden (z. B. das Kriterium „Entsprechung der persönlichen Erwartun- 
gen“). Die meisten der von den Teilnehmer innen verwendeten Beurteilungskrite- 
rien sind jedoch eher als analytisch zu bezeichnen (z. B. das Kriterium „Quanti- 
tät an Fachwörtern“). Holistisch® bedeutet in diesem Zusammenhang, dass ein 
Beurteilungskriterium dazu dient, einen (eher) globalen/generellen Eindruck über 
einen Schülerlösungstext zum Ausdruck zu bringen. Demgegenüber dienen analyti- 
scheH? Beurteilungskriterien dazu, bestimmte Teilleistungen differenziert erfassen 
zu können (bei einem Textprodukt z. B. den Wortschatz, den Satzbau, die Recht- 
schreibung, usw.). Besonders hervorzuheben sind allerdings die Beurteilungskrite- 
rien „Qualität der (Fach-)Sprache“ und „Quantität an Fachwörtern“. Bei beiden 
handelt es sich eindeutig um Beurteilungskriterien, die die sprachliche Realisierung 
eines Schülerlösungstextes betreffen, was umso bemerkenswerter ist, als dass diese 
Kriterien von den befragten Lehrkräften (trotz explizit anderer Aufforderung!) auch 
dazu verwendet wurden, Unterschiede zwischen zwei Schülerlösungstexten bezüg- 
lich ihrer fachlich-konzeptuellen Qualität zu begründen. Anders ausgedrückt zeigt 
sich hier also ein sehr deutlicher empirischer Hinweis auf eine Konfundierung von 
fachlich-konzeptueller und sprachlicher Leistungsfeststellung und -beurteilung durch 
die Teilnehmer innen, wie in Forschungsfrage (F2) vermutet. 


3. Wie sich in Tabelle 6.33 zeigt, weisen die Einschätzungen der Teilnehmer _ innen bei 
den fachlich-konzeptuellen Paarvergleichen eine sehr hohe intersubjektive Überein- 
stimmung auf. Lediglich beim Paarvergleich von Schülerlösungstext B und D, also 
den beiden Schülerlösungstexten, die gemäß der Auswahl der vier Schülerlösungs- 
texte im Rahmen der Entwicklungsstudie eine geringe fachlich-konzeptuelle Qualität 
aufweisen, zeigt sich eine nennenswerte Nichtübereinstimmung der Einschätzungen 
(für 14 Teilnehmer_ innen ist Schülerlösungstext B „besser“ als Schülerlösungstext 
D; für 7 Teilnehmer in sind beide Texte „gleich gut“). Als Kennwert für diese sehr 
hohe intersubjektive Übereinstimmung lässt sich der von von Eye (2006) vorgeschla- 
gene x-Koeffizient1?0 angeben. Für diesen ergibt sich ein Wert von Kyon Eye = .91. 


HƏFür eine detaillierte Begriffsbestimmung, sowie eine kritische Auseinandersetzung mit der Dichotomie 
„holistische versus analytische Beurteilungskriterien“ siehe Arras (2007, S. 80 u. £.). 

150Von-Eyes-k ist eine Verallgemeinerung des von Brennan & Prediger (1981) vorgeschlagenen k- 
Koeffizient für mehr als 2 Beurteiler_innen (hier: die 21 Teilnehmer innen der Hauptstudie). Für 
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Aus den Spalten von Tabelle 6.33 geht allerdings auch hervor, dass jeweils nur von 
einem Bruchteil der Teilnehmer innen, die bei einem der fachlich-konzeptuellen 
Paarvergleiche zu derselben Entscheidung gekommen sind, auch dieselben Beurtei- 
lungskriterien zur Entscheidungsbegrtindung herangezogen wurden. Alles in allem 
weisen also (lediglich) die Einschätzungen der Teilnehmer innen im Rahmen der 
fachlich-konzeptuellen Paarvergleiche eine sehr hohe intersubjektive Übereinstim- 
mung auf, was jedoch nicht für die Begründungen dieser Einschätzungen gilt. 


4. Des Weiteren zeigt sich in Tabelle 6.33, dass beim fachlich-konzeptuellen Paarver- 
gleich von Schülerlösungstext A und C die Einschätzungen aller Teilnehmer _ innen 
von der kontrastierenden Auswahl der vier Schülerlösungstexte im Rahmen der Ent- 
wicklungsstudie abweicht: Alle Teilnehmer _ innen sind zu der Einschätzung gelangt, 
dass Schülerlösungstext C „besser“ als Schülerlösungstext A ist. Bemerkenswert ist 
dabei vor allem, dass eine Mehrheit der Teilnehmer innen (12) die „Qualität der 
(Fach-)Sprache“ — also ein nicht die fachlich-konzeptuelle Qualität eines Schülerlö- 
sungstextes betreffendes Merkmal — als Beurteilungskriterium bei der Begründung 
dieser Einschätzung genannt haben. Hier zeigt sich also ein deutlicher empirischer 
Hinweis auf eine Konfundierung von fachlich-konzeptueller und sprachlicher Leis- 
tungsfeststellung und -beurteilung durch die Teilnehmer innen (Forschungsfrage 
(F2)). Insbesondere die Äußerungen von Frau Novack beim fachlich-konzeptuellen 
Paarvergleich von Schülerlösungstext A und C stützen diese Interpretation: „[Man 
kann] bei Antwort A ähm schon dies- Konzept ähm finden|,] [...] aber (.) das ge- 
hört für mich schon dazu, dass er das auch dann ähm formuliert.“ (Seg. 530). Sie 
relativiert also fachlich-konzeptuelle Merkmale des Schülerlösungstextes A und be- 
gründet dies damit, dass der Text zu viele Mängel bezüglich einer sprachlichen Norm 
aufweist, deren Beherrschung von ihr vorausgesetzt wird. 


5. Wie sich in Tabelle 6.34 zeigt, weisen die Einschätzungen der Teilnehmer _ innen bei 
den sprachlichen Paarvergleichen ebenfalls eine sehr hohe intersubjektive Überein- 
stimmung auf. Die Nichtübereinstimmung ist hier allerdings ausgeprägter als bei den 
fachlich-konzeptuellen Paarvergleichen. Bei beiden Paarvergleichen, in denen zwei 
Schülerlösungstexte mit vergleichbarer Qualität in ihrer sprachlichen Realisierung 
miteinander verglichen werden sollten (Paarvergleich von Schülerlösungstext A und 
D, sowie Schülerlösungstext B und C), zeigt sich jeweils eine nennenswerte Nicht- 
übereinstimmung der Einschätzungen. Aus diesem Grund ist auch der Kennwert 
für die intersubjektive Übereinstimmung zwischen den Teilnehmer innen bei den 
sprachlichen Paarvergleichen geringer als bei den fachlich-konzeptuellen Paarverglei- 
chen. Für die sprachlichen Paarvergleiche ergibt sich ein Wert von Kyon Eye = -79. 
Wie zudem aus den Spalten von Tabelle 6.34 hervorgeht, hat jeweils nur ein Bruch- 
teil der Teilnehmer innen, die bei einem der sprachlichen Paarvergleiche zu der- 
selben Einschätzung gekommen sind, auch dieselben Beurteilungskriterien zur Ent- 
scheidungsbegründung herangezogen. Zusammengefasst weisen also auch bei den 


von-Eyes-x gelten — als Faustregel — Werte ab .40 als „akzeptabel“, ab .60 als „gut“ und Werte ab .75 
als „sehr gut“ (vgl. Wirtz & Caspar, 2002, S. 59). 


298 


6. Hauptstudie 


sprachlichen Paarvergleichen (lediglich) die Einschätzungen der Teilnehmer innen 
eine sehr hohe intersubjektive Übereinstimmung auf, nicht jedoch die Begründungen 
dieser Einschätzungen. 


6. Ferner zeigt sich in Tabelle 6.34, dass bei sprachlichen Paarvergleichen, in denen 
zwei Schülerlösungstexte miteinander verglichen werden sollen, die beide eine ge- 
ringe bzw. hohe Qualität in ihrer sprachlichen Realisierung aufweisen (sprachlicher 
Paarvergleich von Schülerlösungstext A und D, bzw. von Schülerlösungstext B und 
C), jeweils eine Mehrheit der Teilnehmer innen eine Einschätzung vorgenommen 
hat (15 bzw. 13 Teilnehmer _ innen), die von der kontrastierenden Auswahl der vier 
Schülerlösungstexte im Rahmen der Entwicklungsstudie abweicht. Bei beiden Paar- 
vergleichen ist dabei bemerkenswert, dass das — eher holistische — Beurteilungskri- 
terium „Qualität der (Fach-)Sprache“ von auffällig vielen Teilnehmer innen ver- 
wendet wurde, auch wenn sie zu unterschiedlichen Einschätzungen gekommen sind. 
Dies lässt vermuten, dass die einzelnen Teilnehmer _ innen ein unterschiedliches Ver- 
ständnis davon haben, wodurch sich die Qualität der sprachlichen Realisierung ei- 
nes Schülerlösungstextes auszeichnet. Hier zeigt sich also ein Hinweis darauf, dass 
die Teilnehmern _ innen bei der Feststellung und Beurteilung sprachlicher Schüler- 
leistungen zum Teil auf unterschiedliche Ressourcen zurückgreifen (Forschungsfrage 


(F1)). 


6.4.1.4. Limitation und Zwischenfazit 


Die Vielzahl der im Rahmen der inhaltlich strukturierenden qualitativen Inhaltsanalyse 
identifizierten Beurteilungskriterien sprechen dafür, dass die Teilnehmer_innen in der re- 
trospektiven Befragung insgesamt auf ein facettenreiches Wissen und Können zur Feststel- 
lung und Beurteilung fachlich-konzeptueller und sprachlicher Schülerleistungen zurückge- 
griffen haben (Forschungfrage (F1)). Die sehr hohe intersubjektive Übereinstimmung der 
Einschätzungen im Rahmen der Paarvergleiche, dass aber gleichartige Einschätzungen 
zum Teil sehr unterschiedlich begründet wurden, spricht zudem dafür, dass die Teilneh- 
mer innen zu vergleichbaren Gesamteinschätzungen der fachlich-konzeptuellen und/oder 
sprachlichen Leistungen von Schüler _ innen gelangten, obwohl sie sich in ihrem Vorgehen 
bei der Leistungsfeststellung und Beurteilung teilweise deutlich voneinander unterscheiden 
(Heranziehen verschiedener Beurteilungskriterien). Vor allem aber konnten im Rahmen 
der fachlich-konzeptuellen und sprachlichen Paarvergleiche die folgenden Befunde identi- 
fiziert werden: 


e Insgesamt 7 Beurteilungskriterien wurden von den Teilnehmer innen sowohl bei 
den fachlich-konzeptuellen Paarvergleichen, als auch bei den sprachlichen Paarver- 
gleichen für die Begründung ihrer Einschätzungen eingesetzt. 


e Insbesondere wurden die Beurteilungskriterien „Quantität an Fachwörtern“ und 
„Qualität der (Fach-)Sprache“ von den Teilnehmer innen unter anderem auch da- 
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zu verwendet, um zwei Schülerlösungstexte hinsichtlich ihrer fachlich-konzeptuellen 
Qualitàt miteinander zu vergleichen. 


e Alle 21 Teilnehmer innen sind im Rahmen der fachlich-konzeptuellen Paarverglei- 
che — entgegen der Auswahl der vier Schiilerlosungstexte im Rahmen der Entwick- 
lungsstudie — zu der Einschätzung gelangt, dass sich die Schülerlösungstexte A und 
C in ihrer fachlich-konzeptuellen Qualitat voneinander unterscheiden. Bemerkens- 
wert ist dabei, dass 12 Teilnehmer innen bei der Begründung dieser Einschätzung 
(unter anderem) das Beurteilungskriterium „Qualität der (Fach-)Sprache“ genannt 
haben. 


Diese drei Befunde lassen sich als sehr deutliche empirische Hinweise auf eine Konfundie- 
rung von fachlich-konzeptueller und sprachlicher Leistungsfeststellung und -beurteilung 
durch die Teilnehmer innen interpretieren (Forschungsfrage (F2)). Darüber, wie ausge- 
prägt diese Konfundierung ist, lässt sich jedoch auf Grundlage dieser rein qualitativen 
Befunde keine Aussage treffen. Aus diesem Grund wurden die in der retrospektiven Be- 
fragung gewonnenen Daten einer zusätzlichen quantitativen Analyse unterzogen. Diese 
Analyse wird im folgenden Abschnitt dargestellt. 
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exemplarischer "Transkriptauszug 


Angemessenheit des 
Fachwissens in Bezug 


zur Aufgabenstellung 


Anvendung von 
Fachmethoden 


Fachliche Korrektheit 
des Inhalts 


Inhaltsreichtum/ 
Quantitat von 


Fachwissen 


Qualitat des Bezugs 
zur Aufgabenstellung 


Vollstandigkeit in 
Bezug zur 


Aufgabenstellung 


Differenziertheit / 


Komplexität des Textes 


Entsprechung der 
persönlichen 


Erwartungen 


Qualität der 
(Fach-)Sprache 


Quantität an 


Fachwörtern 


Strukturiertheit/ 
Gliederung des Textes 


Verdichtungsgrad/ 


Präzision des Textes 


Vorhandensein von 
Redundanz 


CundD...[...] C ist besser, ähm weil D inadäquater Weise mit der Frequenz argumentiert 
wird und Medium nicht benannt... also das Schall -n Medium braucht [...] und das wird 
bei C geleistet. 
(Herr Mehlert, Paarvergleich Schülerlösungstext C und D, Seg. 872) 
Ähm B und D [...] Ob sie... 
fachmethodische Arbeiten zu dem Fachlichem mit zu [...] und würde dann sagen, Antwort 
B ist besser als Antwort D, weil da die Fachmethode, das ähm... 
trennen geleistet wurde und bei D nich-. 
(Herr Mehlert, Paarvergleich Schülerlösungstext B und D, Seg. 866-870) 


Also ist A auf alle Fälle eben (..) besser. B hat eben äh gar nicht verstanden, worum 


ob sie fachlich besser is-. Dann zähl- ich jetz- das 


(.) die Probleme zu 


es geht. Dass eben die Funkverbindung eben abgerissen ist [...] und eben auch nicht 
dadurch wieder zustande kommt, dass sich eben die Helme berühren. 

(Herr Lemos, Paarvergleich Schülerlösungstext A und B, Seg. 267) 
Ja, also C war ja für mich das Highlight. 
klar, 
Grund... 


[...] Insofern is- also ganz eindeutich 
Also der 
die fachliche Grundidee, 


C is- fachlich besser. Üh weil es fachlich auch ausführlicher is-. 


die Grundidee von äh... is- in A auch zu finden, 
aber es is- fachlich ausführlicher und deswegen fachlich besser. Also es is- C. 

(Herr Trummer, Paarvergleich Schülerlösungstext A und C, Seg. 616) 
Also, ich finde Antwort A besser, weil es ähm zum Thema gehört. Offenbar ist ja Thema 
„Schall". Und da ist es ja... ähm (.) ist es treffender. 


falsch verstanden worden. Und auch da gibt es ein mhm mhm Prinzip, aber das ist nur 


[...] Hier ist die Aufgabe 
sehr knapp ausgeführt und ähm passt nicht zu... also „Thema verfehlt" würde man knapp 
sagen. 

(Herr Uckermark, Paarvergleich Schülerlösungstext A und B, Seg. 694) 
Ich habe die Antwort A besser bewertet, zumindest mit 1 Punkt, als die Antwort B und 
Fälle 
berücksichtigt worden sind während in äh Antwort B nur die zweite Situation kommentiert 


äh die Begründung ist, dass in Antwort A beide Phänomene, also beide 
wurde. 


(Herr Carboni, Paarvergleich Schülerlösungstext A und B, Seg. 452) 


So, [...] Ähm, weil es noch 
differenzierter (.) beantwortet wurde. Insbesondere der 2. Teil, wann es denn sozusagen 
Das ähm der Schall sich ähm ausbreitet. [...] Also da wird tatsächlich 
noch -ne Begründung versucht (.) zu geben, warum sich Schall dann über das Glas 


A, C. Dann ist für mich Antwort C die fachlich bessere. 


hörbar ist. 


ausbreiten kann. 


(Frau Sohm, Paarvergleich Schülerlösungstext A und C, Seg. 490) 
A und C. Okay, 
Musterlösung. Von daher würd- ich sagen, da ist es gerechtfertigt, 


da fand ich natürlich C besser, das war ja quasi gelöst wie meine 
dass des besser 
ist. 

(Herr Abney, Paarvergleich Schülerlösungstext A und C, Seg. 427) 
Ja. Ähm bei A und C ähm sehe ich auch -nen Unterschied. Da ist C äh fachlich besser. 
[...] Ähm, also es sind vor allen... 
(Herr Uckermark, Paarvergleich Schülerlösungstext A und C, Seg. 696) 


[...] Ja da is- ganz klar C besser. 


ist vor allem die Fachsprache. 


B und C. 
Aufgabe C viel mehr Fachwörter, die aus dem... 


[...] Ähm und da is- ja ganz klar in 
aus dem Bereich der Akustik kommen. Und 
deswegen würd- ich das hier besser bewerten fachlich. 

(Herr Rittershaus, Paarvergleich Schülerlösungstext B und C, Seg. 734-736) 
B und C? [...] Ähm da fand ich auch C deutlich besser ähm, weil da des einfach 
strukturiert aufgeschrieben... list.l 
(Herr Abney, Paarvergleich Schülerlösungstext B und C, Seg. 431) 
C und D? Dann wieder C. C ist einfach sehr viel präziser, sehr viel genauer und D 
hat ja das Problem auch nicht erkannt. 
(Herr Dassow, Paarvergleich Schülerlösungstext C und D, Seg. 533) 
CundD. [...] Äh. (...) Gut, ein Manko, was ich jetzt hier ähm gar nicht erwähnt 
hatte, bisher bei... 
letzte Teil sind ja praktisch äh praktisch identisch. 
(Herr Uckermark, Paarvergleich Schülerlösungstext C und D, Seg. 706-708) 


bei D is- auch die Wiederholung, nich-? Also der erste und der 


Tabelle 6.31.: Beurteilungskriterien, die die Teilnehmer innen bei den fachlich-konzep- 
tuellen Paarvergleichen der Schülerlösungstexte verwendeten, um ihre Ein- 
schätzungen zu begründen. 
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exemplarischer Transkriptauszug 


Angemessenheit der 
Zeitform 


Attraktivitàt 


des Textes 


Eindeutigkeit 
von Bezügen 


Korrektheit/ Angemessenheit 
des Satzbaus 


Korrektheit/ Angemessenheit 
von (Fach-) Wörtern 


Korrektheit/ Angemessenheit 
von (fachsprachlichen) 


Wortkombinationen 


Länge des Textes 


Lesbarkeit des Textes 


(mutmaßliche) 
Gewissenhaftigkeit des_der 
Schülers Sehülerin während 


des Schreibens 


Raffinesse 
des Satzbaus 


Verwendung von 
angemessenen Bindewörter 


Verwendung der 
richtigen Artikel 


Vorhandensein von 


Rechtschreibungs- und/oder 


Zeichensetzungsfehlern 


A und [...] B. (..) Ja also A sprachlich schlechter als B. [...] Also hier vern die 
richtigen äh Zeiten und Formen verwendet. Nein also Aufgabe B äh (.) besser als A. 
(Herr Onne, Paarvergleich Schülerlösungstext A und B, Seg. 287) 
Äh C und D. C. So. Also der hat auch 
seine Mängel, aber wir sind ja auch in der Schule und nich-... 
(Herr Einert, Paarvergleich Schülerlösungstext C und D, Seg. 890-891) 
B is- trotzdem sprachlich besser, [...] weil auch zum Beispiel sowas wie sie haben 
sich nicht gehört. Ähm is- es schon schöner auch mit die beiden Astronauten anzufangen 


[...] Also des is- einfach -n schöner Text. 


damit klar ist, was mit sie gemeint ist. Auch das is- -ne Aufgabe. 
(Herr Geppert, Paarvergleich Schülerlösungstext B und D, Seg. 916) 
(...) Also sprachlich find- ich B besser. [...] Äh das sind vollständige Sätze. Die 
Begründung- äh sind von der Satzkonstruktion her vernünftich. 
(Frau Pinna, Paarvergleich Schülerlösungstext A und B, Seg. 448) 
A und C. Ähm (...) auf jeden Fall C, weil das äh... 
der Sprache is-. 


weil das auch die Eindeutichkeit 
Also da werden die eindeutigen Begriffe formuliert und auch richtich 
verwendet. 

(Herr Geppert, Paarvergleich Schülerlösungstext A und C, Seg. 896) 
beide nicht perfekt. [...] Aber 
gegenüber... bei B gegenüber A, was die (..) äh sprachliche Ausdrucksfähigkeit (.) 


Also sin- -n leichter (..) leichter Vorteil 
betrifft. Also (.) das sieht man auch an solchen (.) Wörtern wie der Ton geht... 
(..) äh... 
Und das andere: stellt eine Verbindung her. Is- dann schon etwas höher. Also B is- 
besser. 


durch das Ton geht. [...] -So sprachlich -n sehr, sehr einfaches Deutsch. 


(Herr Feldner, Paarvergleich Schülerlösungstext A und B, Seg. 555) 

B und C. [...] Also ähm ja ich würde jetz- einfach sprachlich doch ma- C besser 

bewerten, weil ich finde, dass es einfach mehr Text is- und er sich (.) auf so -nem 
hohen Niveau hält. 

(Herr Rittershaus, Paarvergleich Schülerlösungstext B und C, Seg. 759) 

Okay A und B. [...] Ganz klar Antwort B. Hier sind komplexere Sätze und irgendwie 


schön... sch-... schöner zu lesen. Also fällt mir leichter das zu lesen. 
(Herr Rittershaus, Paarvergleich Schülerlösungstext A und B, Seg. 747) 
C.) Äh da hat 


der könnte viel 


sch-... 


(...) Das is- 
derjenige... 


irgendwie so -ne völlig unsinnige Wiederholung. 
(..) würd- ich einfach mal so reininterpretieren, 
besser, 


der könnte es auch weglassen, wenn er's nochmal durchgelesen hätte. War 


einfach nur schlampich. [...] Hat's hingeschrieben, zack weg damit. [...] So, dass 


is- das... das vermute ich dahinter. 

(Herr Trummer, Paarvergleich Schülerlösungstext A und D, Seg. 654) 
A und C. [...] Ähm bei C ist äh (.) positiv auch hier die Konjunktion also, nämlich. 
Also das ist äh... gut. Hier die Voraussetzungen... 


Anfang genannt. Das ist äh sehr sprachlogisch aufgebaut. 


Jeweils die Voraussetzungen am 
[...] Ja, sogar hier so 
diesen sogenannten Verb-Erstsatz. Meine Frau ist Linguistin, deshalb haben 
[...] Das ist ein ganz hohes sprachliches Niveau. 

(Herr Uckermark, Paarvergleich Schülerlösungstext A und C, Seg. 712) 
B und D. Äh da find- ich B deutlich besser. Eben, wie gesagt, vollständige Sätze, 


diese, 
wir das mal untersucht. 


äh begründende, also ver-... verbindende Konjunktionen. 

(Herr Uckermark, Paarvergleich Schülerlösungstext B und D, Seg. 724) 
A und D. [...] Also sprachlich äh D über A. Weil [...] die richtige äh äh äh 
grammatikalische Form benutzt wird, ne? Also hier: das Ton... der Artikel 


fängts an. 


fängt ja... 


(Herr Onne, Paarvergleich Schülerlösungstext A und D, Seg. 291) 


Ähm (.) also bei A hatte ich auch angestrichen [...] Komma fehlt. 
(Herr Uckermark, Paarvergleich Schülerlösungstext A und B, Seg. 724) 


Tabelle 6.32.: Beurteilungskriterien, die die Teilnehmer _ innen bei den sprachlichen Paar- 
vergleichen der Schülerlösungstexte verwendeten, um ihre Einschätzungen 
zu begründen. 
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exemplarischer Transkriptauszug 


A und C. Áh (..) C... die Antwort C is- sehr viel differenzierter dargestellt als 

Differenziertheit/ | die Antwort A. Darum find- ich die Antwort C sprachlich... und d- die is- auch 
Komplexität des Textes | sprachlich und vor allem fachsprachlich besser. 

(Herr Quezada, Paarvergleich Schiilerlosungstext A und C, Seg. 349) 

Also die A hat [...] fiir mich nicht irgendwie das, was ich in der Physik gerne hatte. 


Entsprechung der [...] Ist B knapp besser. 


Pee nce Erwartungen (Herr Jonuzi, Paarvergleich Schiilerlosungstext A und B, Seg. 280) 
B und C. [...] Also àhm ja ich vürde jetz- einfach sprachlich doch ma- C besser 
bewerten, weil ich finde, dass es einfach mehr Text is- und er sich (.) auf so -nem 
hohen Niveau hält. Ahm... (liest leise) (...) Ja also da find- ich C leicht auf jeden 


Qualitát der Fall besser, sprachlich als als B. Warum: İhm (..) fallt mir schwer das zu begründen 


(Fach-)Sprache muss ich sagen. [...] Und da Antwort C brilliert einfach durch die ho-... das hohe 


sprachliche Niveau. So! Aus meiner Sicht. 

(Herr Rittershaus, Paarvergleich Schülerlósungstext B und C, Seg. 759) 
B und C. (...) Schon mhm... C ist sprachlich (..) anspruchsvoller. (..) İhm (...) 
[...] Mehr Fachbegriffe benutzt. (..) Schwingungen, Vakuum, (...) Schallwellen, (...) 
hier vird nur von besserer Funkverbindung (..) gesprochen. Also mehr Fachbegriffe 
[...] als Antvort B. 


Quantitat 
an Fachwortern 


(Herr Mehlert, Paarvergleich Schülerlösungstext B und C, Seg. 880) 

A und C. Ja A hat die Schwächen, die ich gerade schon erklärt habe. Und C is- 

Strukturiertheit/Gliederung | eigentlich sehr stark. Das is- sehr präzise ähm, sogar noch gegliedert. [...] Und 
des Textes | deswegen is- C deutlich besser als A. 

(Herr Hastedt, Paarvergleich Schülerlösungstext A und C, Seg. 589) 

Also sprachlich find- ich B besser. Ähm also es sind ja nur 2 Sätze. [...] Insofern 


Verdichtungsgrad/Präzision | is-... Und das alles praktisch so sprachlich relativ kurz zusammengefasst. Insofern 
des Textes | find- ich das sprach-... Antwort B sprachlich besser als A. 
(Herr Mehlert, Paarvergleich Schülerlösungstext A und B, Seg. 876) 


B und D. B ist besser (...), weil D diesen... diese S- Satzwiederholung [...] 


Vorhandensein von | . s š R 
eingebaut hat, die zur Vervirrung führt. 


me (Herr Mehlert, Paarvergleich Schülerlösungstext B und D, Seg. 882) 


Tabelle 6.32.: Beurteilungskriterien, die die Teilnehmer _ innen bei den sprachlichen Paar- 
vergleichen der Schülerlösungstexte verwendeten, um ihre Einschätzungen 
zu begründen (Fortsetzung). 
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fachlich-konzeptuelle 
Paarvergleiche 


Mögliche Einschätzungen 


Anzahl an Einschätzungen 


Schülerlösungstext 


Schülerlösungstext 


A und C 


Schülerlósungstext 


Schülerlósungstext 


B und C 


Schülerlósungstext 
B und D 


Sehülerlösungstext 


C und D 


Angemessenheit des Fachwissens 


in Bezug zur Aufgabenstellung 


Anwendung von 


Fachmethoden 


Fachliche Korrektheit 
des Inhalts 


Inhaltsreichtum / 


Quantitat von Fachvvissen 


Qualitat des Bezugs 


zur Aufgabenstellung 
Vollständigkeit in Bezug 
zur Aufgabenstellung 


Differenziertheit / 
Komplexität des Textes 


Entsprechung der 
persönlichen Erwartungen 
Qualität der 
(Fach-)Sprache 

Quantität an 
Fachwörtern 


Strukturiertheit/ 
Gliederung des Textes 


Verdichtungsgrad/ 
Präzision des Textes 
Vorhandensein von 


Redundanz 


6. Hauptstudie 


Tabelle 6.33.: Anzahl der Teilnehmer innen die ein bestimmtes Beurteilungskriterium bei einem bestimmten fachlich-konzeptuellen 
Paarvergleich verwendeten. Die grau hervorgehobenen Spalten repräsentieren die Einschätzungen bei den fachlich- 
konzeptuellen Paarvergleichen, die mit der Auswahl der vier Schülerlösungstexte im Rahmen der Entwicklungsstudie 
übereinstimmen. 
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6.4.2. Quantitative Analyse der Einschätzungen der 


Teilnehmer_innen im Rahmen der Paarvergleiche151 


6.4.2.1. Methodische Vorbemerkungen 


Die Einschätzungen, die die Teilnehmer innen im Rahmen der fachlich-konzeptuellen 
und sprachlichen Paarvergleiche vorgenommen haben, wurden nicht nur einer qualita- 
tiven, sondern auch einer quantitativen Analyse unterzogen. Die im folgenden darge- 
stellte Analyse entspricht dabei im in Abschnitt 5.4.2 beschriebenen Mixed-Methods- 
Triangulationdesign sowohl der quantitativen Analyse der Leitungsmitschriften, als auch 
der quantitativen Analyse der inhaltsanalytischen Codierungen der retrospektiven Befra- 
gungen. Grund hierfür ist, dass die Codierungen, die bei der Inhaltsanalyse der Verbalda- 
ten aus den retrospektiven Befragungen vorgenommenen wurden, mit den Leitungsmit- 
schriften tibereinstimmen (vgl. Unterabschnitt 6.4.1.2). 


Um das methodische Vorgehen, das fiir die quantitative Analyse der Daten aus den 
fachlich-konzeptuellen und sprachlichen Paarvergleiche herangezogen wurde, nachvollzie- 
hen zu können, gilt es sich ins Gedachtnis zu rufen, dass die vier Schülerlösungstexte A, 
B, C und D in einem mehrschrittigen Codierfahren als Kontrastfälle gewählt wurden (vgl. 
Unterkapitel 5.3). Für die Rangfolge der vier Schülerlösungstexte bezüglich... 


.. Ihrer fachlich-konzeptuellen Qualität gilt: B= D<A=C. 
... der Qualität ihrer sprachlichen Realisierung gilt: A = D < B = C. 


In der linken Hälfte von Abbildung 6.21 sind die vier Schülerlösungstexte entsprechend die- 
ser Rangfolgen in einem zweidimensionalen Koordinatensystem mit den Achsen „fachlich- 
konzeptuelle Qualität“ und „Qualität der sprachlichen Realisierung“ verortet. Die vier 
Punkte, die in diesem Koordinatensystem die Schülerlösungstexte A, B, C und D reprä- 
sentieren, bilden ein Rechteck, weswegen sich zwischen ihnen kein korrelativer Zusammen- 
hang ergibt (symbolisiert durch die gestrichelte Linie in Abbildung 6.21 links). 


Wie in Anhang F vollständig aufgeführt, lassen sich die Einschätzungen, die ein e Teil- 
nehmer in im Rahmen der Paarvergleiche vorgenommen hat, ebenfalls in jeweils zwei 
Rangfolgen der vier Schülerlösungstexte bezüglich ihrer fachlich-konzeptuellen Qualität 
bzw. der Qualität ihrer sprachlichen Realisierung zusammenfassen. So ist... 


.„D<B<A<C die Rangfolge der 4 Schülerlösungstexte, die aus den fachlich-kon- 
zeptuellen Paarvergleichen von Herrn Abney hervorgeht, 


. D < A < B < C die Rangfolge der 4 Schülerlösungstexte, die aus den sprachlichen 
Paarvergleichen von Herrn Abney hervorgeht, 


. D=B<A < C die Rangfolge der 4 Schülerlösungstexte, die aus den fachlich-kon- 
zeptuellen Paarvergleichen von Herrn Balke hervorgeht, 


151 Teile dieses Abschnitts stellen eine überarbeitete und erweiterte Fassung von Feser & Höttecke (2018) 
dar. 
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Auswahl der vier Schülerlósungstexte in der fachlich-konzeptuelle und sprachliche 
Entwicklungsstudie Paarvergleiche der 21 Teilnehmer innen 
S = 
š š ë 
A A 
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a : $ 
m B C £ < + 
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Abbildung 6.21.: Graphische Darstellung der Rangplätze von Schülerlösungstext A bis D 
bezüglich ihrer fachlich-konzeptuellen Qualität bzw. der Qualität ihrer 
sprachlichen Realisierung. Links sind die vier Schülerlösungstexte ent- 
sprechend der kontrastierenden Auswahl in der Entwicklungsstudie an- 
geordnet. Rechts sind die vier Schülerlösungstexte entsprechend der me- 
dianen Rangplätze angeordnet, die aus den fachlich-konzeptuellen und 
sprachlichen Paarvergleichen der Teilnehmer innen hervorgehen. Die 
Balken im rechten Diagramm repräsentieren die Rangplatz-Spannweiten 
der Schülerlösungstexte. 


.. D < A < C < B die Rangfolge der 4 Schülerlösungstexte, die aus den sprachlichen 
Paarvergleichen von Herrn Balke hervorgeht, 


. USW. 


In der rechten Hälfte von Abbildung 6.21 sind die Schülerlösungstexte A, B, C und D 
entsprechend der medianen Rangplätze angeordnet, die aus den fachlich-konzeptuellen 
und sprachlichen Paarvergleichen aller 21 Teilnehmer innen hervorgehen (die Balken 
repräsentieren die Rangplatz-Spannweiten der Schülerlösungstexte). Wie sich in dieser 
Teilabbildung andeutet, weichen die Rangfolgen, die aus den Paarvergleichen der Teilneh- 
mer innen hervorgehen, zum Teil erheblich von der Auswahl der vier Schülerlösungstexte 
im Rahmen der Entwicklungsstudie ab. Augenscheinlich zeigt sich hier die Tendenz ei- 
nes positiven korrelativen Zusammenhangs (symbolisiert durch die gestrichelte Linie in 
Abbildung 6.21 rechts). 


Im Rahmen der quantitativen Analyse der Daten aus den fachlich-konzeptuellen und 
sprachlichen Paarvergleichen wurde überprüft, ob sich diese augenscheinliche Tendenz 
eines positiven korrelativen Zusammenhangs bestätigen lässt. Hierzu wurde der von Tor- 
gerson (1956) und Ludwig (1962) entwickelte Rangkorrelationskoeffizient 7* bestimmt, da 
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dieser ermöglicht die folgenden, nicht zu vernachlassigenden Merkmale des zu analysie- 
renden Datensatzes mit zu berücksichtigen: 


1. Die insgesamt 252 Einschatzungen, die bei den fachlich-konzeptuellen bzw. bei den 
sprachlichen Paarvergleichen erhoben wurden, können nicht in eine gemeinsame 
Rangordnung zusammengefasst werden (vgl. Bortz et al., 2008, S. 439). Grund hier- 
für ist, dass diese von 21 verschiedenen Lehrer innen stammen und deshalb die 252 
Einschätzungen in 21 Teildatensätze aufzuteilen sind. 


2. Insgesamt wurden in der Hauptstudie lediglich 21 Physiklehrer innen befragt. Für 
die quantitative Analyse bedarf es daher eines statistischen Verfahrens, dass auch 
für kleine Probandenzahlen geeignet ist. 


3. Fur jede Lehrkraft ergibt sich aus den 6 fachlich-konzeptuellen und 6 sprachlichen 
Paarvergleichen für jeden der vier Schülerlösungstexte ein Rangplatz-Wertepaar. 
Fiir die Analyse liegen also pro Lehrkraft lediglich vier Datenpunkte vor. 


4. Bei jedem Paarvergleich sollte eingeschätzt werden, ob einer der beiden Schülerlö- 
sungstexte besser ist, oder ob beide Texte gleich gut sind. Die Einschätzungen, die 
bei den fachlich-konzeptuellen und sprachlichen Paarvergleichen erhoben wurden, 
weisen also lediglich ein ordinales Skalenniveau auf. 


T* berechnet sich als (mit den Mächtigkeiten der Teildatensätze gewogener) Mittelwert 
152 zwischen den Rangfolgen, die aus den fachlich- 
konzeptuellen und sprachlichen Paarvergleichen je Teilnehmer in hervorgehen. Es gilt 


(vgl. Ludwig, 1962, S. 45): 


der 21 Rangkorrelationskoeffizienten 


k 
z ° D Ti , Venn ny = nə = .. = Nk 
0.7, +, im allgemeinen Fall 


mit 
k = Anzahl der Teildatensätze (hier: Anzahl der Teilnehmer innen) 
m: = Anzahl der Wertepaare im i-ten Teildatensatz (hier: Anzahl der Schülerlösungstexte) 


152 (hier: Kendalls-r zwischen 


Tr, = Kendalls-r für die Wertepaare im 7-ten Teildatensatz 
den Rangfolgen, die aus den fachlich-konzeptuellen und sprachlichen Paarvergleichen 


je Teilnehmer_in hervorgehen). 


152Hierbei handelt es sich um den Rangkorrelationskoeffizienten nach Kendall fiir Wertepaare, die keine 
Rangbindung aufweisen (vgl. Bortz et al., 2008, S. 422 u. f.). Soll 7* für Wertepaare, die Rangbindun- 
gen aufweisen, bestimmt werden, empfiehlt Torgerson (1956, S. 151) allen ranggleichen Wertepaaren 
zufallig einen der auf sie fallenden Range zuzuordnen. Dieser Empfehlung wurde im Rahmen der 
vorliegenden Arbeit gefolgt. 
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Ferner gilt, dass für153 S> n; > 20 die Größe 


annàhernd standardnormalverteilt ist (vgl. Bortz et al., 2008, S. 439; Ludwig, 1962, S. 46). 
Bei einem zweiseitigen Test und für das Signifikanzniveau a wird also der Nichtableh- 
nungsbereich der Nullhypothese r* = 0 durch das $- bzw. das (1 — $)-Quantil der Stan- 
dardnormalverteilung bestimmt. 


6.4.2.2. Ergebnis, Interpretation und Limitationen der quantitativen Analyse 


Für die Einschätzungen der 21 Teilnehmer innen im Rahmen der fachlich-konzeptuellen 
und sprachlichen Paarvergleiche ergibt sich ein VVert von r” — .44, der zum Signifikanz- 
niveau a = .01 verschieden von 0 ist (z = 4.08). 


Es ist plausibel, die Starke dieses korrelativen Zusammenhangs als Indikator für das Aus- 


154 in dem die Teilnehmer_innen fachlich-konzeptuelle und sprach- 


maf zu interpretieren 
liche Teilleistungsurteile miteinander konfundieren. Grund hierfür ist, dass die Schiiler- 
lösungstexte A bis D in der Entwicklungsstudie als Kontrastfälle so ausgewählt wurden, 
dass zwischen ihrer fachlich-konzeptuellen Qualitat und der Qualitat ihrer sprachlichen 
Realisierung kein korrelativer Zusammenhang besteht (vgl. Abschnitt 5.2.2), sowie ferner 
die in Abschnitt 6.4.1 bereits dargestellten qualitativen Befunde, die für eine Konfundie- 
rung von fachlich-konzeptueller und sprachlicher Leistungsfeststellung und -beurteilung 
durch die Teilnehmer innen sprechen (z. B. die Verwendung zum Teil gleicher Beur- 
teilungskriterien bei den fachlich-konzeptuellen und sprachlichen Paarvergleichen). Der 
Wert von 7” = .44 weist damit also auf eine moderat/”? ausgeprägte Konfundierung der 
fachlich-konzeptuellen und sprachlichen Leistungsfeststellung und -beurteilung der Teile- 
nehmer innen hin. 


Dieser Befund gilt allerdings nur für die fachlich-konzeptuellen und sprachlichen Paarver- 
gleiche im Rahmen der retrospektiven Befragung, da keine Daten aus der laut-denkenden 
Korrektur der vier Schülerlösungstexte für die hier vorgenommene Analyse herangezogen 
wurden. An dieser Stelle der vorliegenden Arbeit kann daher nicht aufgeklärt werden, ob 
und falls ja wie ausgeprägt die Teilnehmer_ innen bei der laut-denkenden Korrektur der 


153Diese Bedingung ist für die quantitative Analyse der fachlich-konzeptuellen und sprachlichen Paarver- 
gleiche erfüllt, denn es gilt hier: Y) nj = 21 - 4 = 84 > 20. 

154Für eine methodentheoretische Diskussion notwendiger Bedingungen einer kausalen Interpretationen 
korrelativer Zusammenhänge in der erziehungswissenschaftlichen Forschung siehe Renkl (1993). 

155Da r” als (gewogenes) Mittel der Rangkorrelationskoeffizienten nach Kendall der zu analysierenden 
Teildatensätze berechnet wird (vgl. Unterabschnitt 6.4.2.1), können die gängigen Faustregeln für 
Kendalls-r auf 7* übertragen werden. Für Kendalls-r gelten Werte ab .10 als „schwacher“, ab .30 
als „moderater“ und Werte ab .5 als „starker“ korrelativer Zusammenhang (vgl. J. Cohen, 1988, 
S. 79 u. f.; Lomax & Hahs-Vaughn, 2012, S. 273 u. £.). 
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vier Schülerlösungstexte fachlich-konzeptuelle und sprachliche Schülerleistungen mitein- 
ander konfundierten. 


6.5. Integration der Befunde 


In Unterkapitel 6.3 und 6.4 wurde die Analyse der Laut-Denk-Daten, sowie der Daten, 
die von den Teilnehmern _ Teilnehmerinnen in den retrospektiven Befragungen gewonnen 
wurden, beschrieben. Wie aus einem Vergleich der Ergebnisdarstellungen dieser beiden 
Unterkapitel hervorgeht, konnten aus den in der Laborsituation erhobenen Daten kon- 
vergierende, sowie komplementäre Teilbefunde zu den Forschungsfragen (F1) und (F2) 
gewonnen werden. Ferner zeigten sich zu keiner der beiden Forschungsfragen sich wider- 
sprechend (divergierende) Teilbefunde. 


Ziel dieses Unterkapitels ist die Teilbefunde zu Forschungsfrage (F1) und (F2) in ein kalei- 
doskopartiges Gesamtbild zusammenzuführen. Die Darstellung beschränkt sich dabei auf 
eine Kurzdarstellung von aus den vorangegangenen Unterkapiteln aggregierten Befunden, 
die im Sinne der beiden Forschungsfragen von besonderer Relevanz sind. 


6.5.1. Integration der Befunde zu Forschungsfrage (F1) 


Bezüglich der Frage auf welche Ressourcen die teilnehmenden Physiklehrkräfte bei der Ge- 
nese fachlich-konzeptueller und sprachlicher Leistungsurteile zurückgreifen (Forschungs- 
frage (F1)) zeigten sich in den erhobenen Daten sowohl konvergierende, als auch kom- 
plementäre Teilbefunde. Diese lassen sich auf 6 Ressourcen zur Leistungsfeststellung und 
-beurteilung verdichten, die in den folgenden Unterabschnitten genauer beschrieben wer- 
den: 


1. Im Handeln der Teilnehmer _ innen zeigte sich eine Nutzung von Wissen und Können 
zu schulischer Leistungsfeststellung und -beurteilung, das sich speziell auf fachlich- 
konzeptuelle und/oder sprachliche Schülerleistungen bezieht. 


2. In Teilen erfolgte bei der Leistungsurteilsgenese auch eine holistische Feststellung 
und Beurteilung der Schülerleistungen. 


3. Das Handeln der Teilnehmer _ innen bei der Leistungsurteilsgenese erfolgte auch auf 
Basis von generalisiertem Wissen und Können, sowie berufsbezogenen Überzeugun- 
gen zu schulischer Leistungsfeststellung und -beurteilung. 


4. Das Handeln der Teilnehmer innen bei der Leistungsurteilsgenese ist deutlich an 
der kriterialen Bezugsnorm orientiert. 


5. Bei der Leistungsurteilsgenese wurden von den Teilnehmer innen vor allem die 
fachlich-konzeptuellen Merkmale der Schülerlösungstexte beachtet. Sprachliche Merk- 
male spielten hingegen eine deutlich geringere Rolle. Ferner zeigte sich, dass die 
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Teilnehmer _innen in unterschiedlichem Ausmaß sprachliche Merkmale bei der Fest- 
stellung und Beurteilung der Schülerleistungen berücksichtigten. 


6. Die Feststellung und Beurteilung sprachlicher Schiilerleistungen erfolgte durch die 
Teilnehmer_innen tendenziell defizitorientiert, die fachlich-konzeptueller Schiiler- 
leistungen hingegen zum Teil defizitorientiert, in Teilen aber auch fahigkeitsorien- 
tiert. 


Zusammengefasst nutzten die Teilnehmer innen facettenreiches und überwiegend ange- 
messenes Wissen und Können zu (fachspezifischer) Leistungsfeststellung und -beurteilung. 
Ferner handelten sie auch auf Basis ihrer berufsbezogenen Überzeugungen zu schulischer 
Leistungsfeststellung und -beurteilung, sowie ihrer Bezugsnormorientierungen. Das Han- 
deln der Teilnehmer innen bei der Genese fachlich-konzeptueller und sprachlicher Leis- 
tungsurteile in der Laborsituation ist also vereinbar mit dem in Abschnitt 2.2.4 darge- 
stellten Rahmenkonzept einer Assessment Literacy. Sie haben auf Ressourcen zugriffen, 
die sich in diesem Konzept als zwei der drei maßgebende Faktoren identifizieren lassen 
(Wissen und Können, sowie berufsbezogene Uberzeugungen zu (fachspezifischer) Leis- 
tungsfeststellung und -beurteilung), zwischen denen es fiir eine Lehrkraft im Rahmen ei- 
ner schulische Leistungsfeststellung und -beurteilung betreffende Handlungsepisode gilt, 
einen Kompromiss zu realisieren, da diese Faktoren bis zu einem bestimmten Grad verein- 
bar sind und/oder einander konfligieren. Ergo: Die Teilnehmer_innen lassen sich bis zu 
einem bestimmten Grad als bezüglich fachlich-konzeptueller und sprachlicher Leistungs- 
feststellung und -beurteilung grundgebildete Physiklehrkrafte charakterisieren. 


6.5.1.1. Nutzung von Wissen und Können zur Feststellung und Beurteilung 
fachlich-konzeptueller und sprachlicher Schülerleistungen 


Die Teilnehmer innen nutzten in der Laborsituation Wissen und Können zu schuli- 
scher Leistungsfeststellung und -beurteilung, das sich speziell auf fachlich-konzeptuelle 
und/oder sprachliche Schülerleistungen bezieht. Zusammen mit der moderaten bzw. sehr 
hohen intersubjektiven Übereinstimmung der Punkteverteilungen und den Einschätzun- 
gen während der Paarvergleiche (vgl. Abschnitt 6.3.1 und 6.4.1) spricht dieser Befund 
für die Validität der Leistungsurteilsgense der Teilnehmer innen: Die Teilnehmer innen 
nutzten in der Laborsituation (unter anderem) derartiges Wissen und Können, um zu 
einer, bis zu einem bestimmten Grad übereinstimmenden Feststellungen und Beurteilun- 
gen schriftlicher Schülerleistungen zu gelangen, die sich kriterial vor allem bezüglich ihrer 
fachlich-konzeptuellen Qualität bzw. der Qualität ihrer sprachlichen Realisierung vonein- 
ander unterscheiden lassen. 


Die Nutzung von Wissen und Können zur Feststellung und Beurteilung fachlich-konzep- 
tueller und sprachlicher Schülerleistungen zeigte sich im Handeln der Teilnehmer _ innen 
in der Laborsituation sowohl direkt, also auch indirekt. Direkt zeigte sich diese Nutzung 
darin, dass die Teilnehmer _ innen... 
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.. bei ihrer laut denkenden Korrekturarbeit fachlich-konzeptuelle bzw. sprachliche Merk- 
male der Schülerlósungstexte explizit fokussierten (vgl. Unterabschnitt 6.3.2.3 und 
6.3.2.5). 


.. bei ihrer laut denkenden Korrekturarbeit Beurteilungskriterien mitvokalisierten, die 
explizit fachlich-konzeptuelle bzw. sprachliche Merkmale von Schülerlösungstexten be- 
treffen (vgl. Unterabschnitt 6.3.2.3). 


. bei der Erstellung ihrer Erwartungshorizonte in unterschiedlichem Ausmaß neben 
fachlich-konzeptuellen auch sprachliche Merkmale eines Schülerlösungstextes berück- 
sichtigten (vgl. Unterabschnitt 6.3.2.3; Hackemann, 2017). 


.. im Rahmen der retrospektiven Befragung eine Vielzahl von Beurteilungskriterien her- 
anzogen, um einzuschätzen und zu begründen, inwieweit sich zwei Schülerlösungstexte 
hinsichtlich ihrer fachlich-konzeptuellen Qualität bzw. der Qualität ihrer sprachlichen 
Realisierung voneinander unterscheiden (vgl. Abschnitt 6.4.1). 


Indirekt zeigte sich diese Nutzung darin, dass sich Teilnehmer innen zu den vier Schü- 
lerlösungstexten entsprechend ihrer fachlich-konzeptuellen oder sprachlichen Qualitätsun- 
terschiede in unterschiedlichem Umfang positiv wertend/akzeptierend bzw. negativ wer- 
tend/ablehnend äußerten (vgl. Unterabschnitt 6.3.2.5) und sie die vier Schülerlösungstex- 
te entsprechend ihrer kontrastierenden Auswahl auch unterschiedlich bepunkteten (vgl. 
Abschnitt 6.3.1). 


6.5.1.2. In Teilen holistische Feststellung und Beurteilung der Schülerleistungen 


Im Rahmen der Laborsituation erfolgte auch eine holistische Feststellung und Beurteilung 
der Schülerleistungen. Sowohl während ihrer laut-denkenden Korrekturarbeit, als auch der 
retrospektiven Befragung äußerten die Teilnehmer _ innen unter anderem Beurteilungskri- 
terien, die dazu dienen, einen (eher) globalen/generellen Eindruck über eine Schülerleis- 
tung zum Ausdruck zu bringen (vgl. Unterabschnitt 6.3.2.3 und Abschnitt 6.4.1). Ferner 
zeigte sich in den Laut-Denk-Protokollen, dass die Teilnehmer innen die Leistungen in 
den Schülerlösungstexten auch auf Grundlage eines (ersten) eher holistischen Eindrucks 
und/oder heuristisch feststellten und -beurteilten (vgl. Unterabschnitt 6.3.2.3 und 6.3.2.5). 


Hervorzuheben ist allerdings, dass die Teilnehmer_ innen bei ihrer Leistungsurteilsgenese 
in der Laborsituation vor allem analytisch vorgegangen sind. Sowohl beim lauten Denken, 
als auch in der retrospektiven Befragung äußerten die Teilnehmer innen vor allem Beur- 
teilungskriterien, die eine differenzierte Erfassung bestimmter Teilleistungen ermöglichen 
(vgl. Unterabschnitt 6.3.2.3 und Abschnitt 6.4.1). Ferner fokussierten sie bei ihrer laut- 
denkenden Korrekturarbeit vornehmlich fachlich-konzeptuelle, sprachliche oder sonstige 
Merkmale der vier Schülerlösungstexte und verorteten diese in Bezug zu einem sachlichen 
Kriterium (vgl. Unterabschnitt 6.3.2.3 und 6.3.2.5). 
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6.5.1.3. Generalisiertes Wissen und berufsbezogenen Überzeugungen zu 
schulischer Leistungsfeststellung und -beurteilung 


Die Teilnehmer innen handelten in der Laborsituation unter anderem auch auf Basis 
von generalisiertem (ihrem Bewusstsein möglichervveise aber nicht zugànglichem) VVissen 
und Konnen zu schulischer Leistungsfeststellung und -beurteilung, sowie diesbezüglichen 
berufsbezogenen Überzeugungen. Wàhrend des lauten Denkens nutzten sie bis zu einem 
bestimmten Grad verallgemeinerte Erfahrungen und allgemeine Handlungsstrategien zum 
Erstellen eines Erwartungshorizonts und zum Festellen und Beurteilen von Schülerleis- 
tungen (vgl. Unterabschnitt 6.3.2.3). Ferner zeigten sich in einer rekonstruktiven Analyse 
Hinweise, dass das Handeln der Teilnehmer _innen beim lauten Denken, sowie in der retro- 
spektiven Befragung (bewusst oder unbewusst) auch davon beeinflusst war, welche Rolle 
sich ein e Teilnehmer in im Kontext von schulischer Leistungsfeststellung und -beur- 
teilung selbst zuschreibt und inwiefern sich ein e Teilnehmer in bezogen auf schulische 
Leistungsbeurteilung für souverän hält (vgl. Unterabschnitt 6.3.2.3; Kroll, 2017). 


6.5.1.4. Orientierung der Leistungsfeststellung und -beurteilung an der kriterialen 
Bezugsnorm 


Bei der laut-denkenden Korrektur der vier Schülerlösungstexte zeigte sich vor allem eine 
Orientierung der Leistungsfeststellung und -beurteilung an der kriterialen Bezugsnorm 
(vgl. Unterabschnitt 6.3.2.3 und 6.3.2.5). Die Teilnehmer _ innen zogen nahezu ausschließ- 
lich sachliche Kriterien als Bezug der Verortung heran, wenn sie fachlich-konzeptuelle, 
sprachliche oder sonstige Merkmale der Schülerlösungstexte bei ihrer Leistungsurteilsge- 
nese in den Fokus rückten (vgl. Unterabschnitt 6.3.2.5). Ferner zeigte sich bei den Teilneh- 
mer innen die Tendenz sich zu einer Schülerleistung normativ zu äußern, wenn sie diese in 
Bezug zu einem sachlichen Kriterium verorteten (vgl. Unterabschnitt 6.3.2.5). Hinweise, 
die für eine Orientierung an der sozialen und/oder der individuellen Bezugsnorm sprechen 
(z. B. das Heranziehen anderer Schülerlösungstexte oder mutmaßliche Personenmerkmale 
der Schüler innen als Bezug der Verortung), zeigten sich hingegen lediglich vereinzelt 
(vgl. Unterabschnitt 6.3.2.3). 


Einerseits ist bei diesem Befund nicht auszuschließen, dass es sich hierbei in Teilen um 
ein Artefakt der Laborsituation handelt (vgl. Unterabschnitt 6.3.2.3 und 6.3.2.5). An- 
dererseits ist dieser Befund mit den Auskünften der Teilnehmer innen aus dem Lehr- 
kräftefragebogen bis zu einem bestimmten Grad vereinbar. Aus diesen ging hervor, dass 
die Teilnehmer _ innen ihrer Selbsteinschätzung nach in schwacher Tendenz eine kriteriale 
Bezugsnormorientierung aufweisen (vgl. Abschnitt 6.1.2). 
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6.5.1.5. Beachtung fachlich-konzeptueller und sprachlicher Merkmale bei der 
Leistungsurteilsgenese 


Die Teilnehmer innen beachteten bei der laut-denkenden Korrektur der vier Schülerlö- 
sungstexte überwiegend fachlich-konzeptuelle Merkmale und äußerten dementsprechende 
Beurteilungskriterien (vgl. Unterabschnitt 6.3.2.3 und 6.3.2.5). Sprachliche Merkmale der 
vier Schülerlösungstexte spielten im Vergleich hierzu eine mit Abstand geringere Rolle 
(vgl. Unterabschnitt 6.3.2.3 und 6.3.2.5). Hinzu kommt ein unterschiedlicher Umfang, in 
dem sprachliche Merkmale von den Teilnehmer _ innen in der Laborsituation berücksich- 
tigt wurden. So zeigte sich, dass die Teilnehmer innen bei der Erstellung ihres Erwar- 
tungshorizonts sprachliche Merkmale der Schülerlösungstexte in unterschiedlichem Aus- 
maß berücksichtigten. Das Spektrum reicht hier von Teilnehmer _ innen, die bei der Erwar- 
tungshorizonterstellung keine Beurteilungskriterien explizierten, die sprachliche Merkmale 
der Schülerlösungstexte betreffen, bis hin zu Teilnehmer innen, die derartige Beurtei- 
lungskriterien explizit in ihrem Erwartungshorizont fixierten (vgl. Unterabschnitt 6.3.2.3; 
Hackemann, 2017, S. 58 u. f.). Des Weiteren hat die Mehrheit der Teilnehmer_ innen eine 
Feststellung und Beurteilung der sprachlichen Realisierung eines Schülerlösungstextes vor 
allem dann vorgenommen, wenn dieser zu einem bestimmten Grad bezüglich sprachlicher 
Merkmale defizitär ist und/oder dieser die eigenen fachlich-konzeptuellen Erwartungen 
nicht verfehlt (vgl. Anzahl der Teilnehmer _ innen, die in Unterabschnitt 6.3.2.4 Muster 
(la) und (1c) zugeordnet wurden). Lediglich von einer Minderheit der Teilnehmer _ in- 
nen wurde bei allen vier Schülerlösungstexten auch eine Feststellung und Beurteilung 
der sprachlichen Realisierung vorgenommen (vgl. Anzahl der Teilnehmer innen, die in 
Unterabschnitt 6.3.2.4 Muster (1d) zugeordnet wurden). 


6.5.1.6. Defizit- bzw. fähigkeitsorientierte Feststellung und Beurteilung 
sprachlicher und fachlich-konzeptueller Schülerleistungen 


Betrachtet man die Häufigkeit, in der sich die Teilnehmer _ innen beim lauten Denken po- 
sitiv vvertend /akzeptierend, negativ wertend/ablehend oder neutral/gemischt /sonstig zu 
den vier Schülerlösungstexten äußerten, deutet sich eine Tendenz zur defizitorientierten 
Feststellung und Beurteilung der Schülerleistungen an (vgl. Unterabschnitt 6.3.2.3). Be- 
zogen auf die Feststellung und Beurteilung fachlich-konzeptueller und sprachlicher Schü- 
lerleistungen ist diese Tendenz allerdings differenziert zu betrachten: 


Die Feststellung und Beurteilung fachlich-konzeptueller Schülerleistungen erfolgte zum 
Teil defizitorientiert, in Teilen aber auch in einer fähigkeitsorientierten Art und Weise. Ei- 
ne Tendenz zur Fähigkeitsorientierung zeigte sich darin, dass sich die Teilnehmer _ innen, 
wenn sie sich beim lauten Denken zum fachlich-konzeptuellen Eindruck der vier Schü- 
lerlösungstexte äußerten, sie dies signifikant am häufigsten positiv vvertend /akzeptierend 
taten (im Median 51.4 % dementsprechender Äußerungen; vgl. Unterabschnitt 6.3.2.5). 
Eine Defizitorientierung der Feststellung und Beurteilung fachlich-konzeptueller Schüler- 
leistungen zeigte sich hingegen darin, dass sich die Teilnehmer _ innen bei Schülerlösungs- 
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texten mit geringer fachlich-konzeptueller Qualitat, im Median signifikant haufiger zum 
fachlich-konzeptuellen Eindruck äußerten, als sie dies bei Schülerlösungstexten mit hoher 
fachlich-konzeptueller Qualität taten (vgl. Unterabschnitt 6.3.2.5). Zudem zeigten sich 
bei einer Mehrheit der Teilnehmer innen Hinweise darauf, dass sie sich bei der Korrek- 
tur eines Schülerlösungstextes auf die Feststellung und Beurteilung fachlich-konzeptueller 
Merkmale fokussierten, wenn der Schülerlösungstext die eigenen diesbezüglichen Erwar- 
tungen verfehlt (vgl. Anzahl der Teilnehmer innen, die in Unterabschnitt 6.3.2.4 Muster 
(1b) und (1c) zugeordnet wurden). 


Demgegenüber wurden sprachliche Schülerleistungen in einer tendenziell defizitorientier- 
ten Art und Weise festgestellt und beurteilt. Dies zeigte sich an den folgenden drei Teil- 
befunden: Ersten haben sich die Teilnehmer innen, wenn sie sich beim lauten Denken 
zur sprachlichen Realisierung der vier Schülerlösungstexte äußerten, signifikant am häu- 
figsten negativ wertend/ablehnend geäußert (im Median 69.6 % dementsprechender Äu- 
Berungen; vgl. Unterabschnitt 6.3.2.5). Zweitens hat eine Mehrheit der Teilnehmer _ innen 
eine Feststellung und Beurteilung der sprachlichen Realisierung eines Schülerlösungstextes 
nur dann vorgenommen, wenn dieser zu einem bestimmten Grad bezüglich sprachlicher 
Merkmale defizitär ist oder hat sich bei drei der vier Schülerlösungstexte überwiegend ne- 
gativ wertend/ablehnend bezogen auf deren sprachliche Realisierung geäußert (vgl. An- 
zahl der Teilnehmer innen, die in Unterabschnitt 6.3.2.4 Muster (la), (1c) und (1d) 
zugeordnet wurden). Drittens berücksichtigte mehr als ein Drittel der Teilnehmer in- 
nen sprachliche Merkmale der Schülerlösungstexten bei der Erwartungshorizonterstellung 
in einer auffällig defizitorientierten Art und Weise (z. B. durch expliziten Punkteabzug; 
vgl. Unterabschnitt 6.3.2.3; Hackemann, 2017, S. 59). Hinweise, die gegen eine Tendenz 
zur defizitorientierten Feststellung und Beurteilung sprachlicher Schülerleistungen spre- 
chen, zeigten sich hingegen bei weniger als einem Drittel der Teilnehmer _ innen bei ihrer 
laut-denkenden Erwartungshorizonterstellung (z. B. in einer expliziten Punktevergabe für 
sprachliche Merkmale; vgl. Unterabschnitt 6.3.2.3; Hackemann, 2017, S. 58) und/oder in 
qualitativen Prozessaspekten ihrer Leistungsurteilsgenese (z. B. in mehrheitlich positiv 
wertenden/akzeptierenden Äußerungen zur sprachlichen Realisierung von Schülerlösungs- 
texten mit einer diesbezüglich hohen Qualität; vgl. Unterabschnitt 6.3.2.4). 


6.5.2. Integration der Befunde zu Forschungsfrage (F2) 


Sowohl die Analyse der Laut-Denk-Daten, als auch die der retrospektiven Befragungen 
lieferte Teilbefunde, die partikuläre Antworten auf die Frage darstellen, inwieweit Phy- 
siklehrkräfte fachlich-konzeptuelle und sprachliche Leistungsurteile miteinander konfun- 
dieren (Forschungsfrage (F2)). In den folgenden beiden Unterabschnitten erfolgt zunächst 
eine Zusammenführung der qualitativen und quantitativen Befunde zu Forschungsfrage 
(F2), bevor anschließend deren Quintessenz erörtert wird. 
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6.5.2.1. Qualitative Teilbefunde zur Konfundierung fachlich-konzeptueller und 
sprachlicher Leistungsfeststellung und -beurteilung 


Im Rahmen der Extraktion und Interpretation qualitativer Prozessaspekte aus den Laut- 
Denk-Daten (vgl. Unterabschnitt 6.3.2.4) konnten insgesamt zwei Bewertungslogiken iden- 
tifiziert werden, bei denen eine Konfundierung fachlich-konzeptueller und sprachlicher 
Sehülerleistungen stattfand. In der Abfolge mitvokalisierter Gedankenschritte von insge- 
samt... 


... 7 Teilnehmer innen konnte die Bewertungslogik identifiziert werden, fachlich-kon- 
zeptuell richtige oder anschlussfähige Denkfiguren in einem Schülerlösungstext zu re- 
lativieren, wenn in diesem die Sprachgebrauchserwartungen des der Teilnehmers - 
Teilnehmerin nicht hinreichend erfüllt wurden (vgl. Muster (2a) in Unterabschnitt 
6.3.2.4). 


.. 4 Teilnehmer innen konnte die Bewertungslogik identifiziert werden, sprachliche Män- 
gel eines Schülerlösungstextes zu relativieren, wenn in diesem die fachlich-konzeptuel- 
len Erwartungen des der Teilnehmers_ Teilnehmerin (in Teilen) erfüllt wurden (vgl. 
Muster (2c) in Unterabschnitt 6.3.2.4). 


Daneben zeigte sich in den Laut-Denk-Daten von 7 Teilnehmer innen die Bewertungs- 
logik, fachlich-konzeptuelle Merkmale von Merkmalen der sprachlichen Realisierung zu 
trennen (vgl. Muster (2b) in Unterabschnitt 6.3.2.4). Insgesamt konnte also bei einigen 
Teilnehmer _ innen zwar eine Herangehensweise bei der Leistungsurteilsgenese identifiziert 
werden, durch die eine Konfundierung fachlich-konzeptueller und sprachlicher Leistungs- 
urteile vermieden wird, gleichzeitig zeigte sich bei einer Vielzahl der Teilnehmer_ innen, 
dass diese durch ein relativierendes Herangehen fachlich-konzeptuelle und sprachliche 
Schülerleistungen miteinander konfundieren. 


Sehr deutliche qualitative Teilbefunde, aus denen eine Konfundierung fachlich-konzeptu- 
eller und sprachlicher Schülerleistungen hervorgeht, offenbarten sich zudem in den Ver- 
baldaten der retrospektiven Befragungen (vgl. Unterabschnitt 6.4.1.3). Es zeigte sich, 
dass die Teilnehmer _innen insgesamt 7 Beurteilungskriterien sowohl bei den fachlich- 
konzeptuellen, als auch bei den sprachlichen Paarvergleichen der Schülerlösungstexte ein- 
gesetzt haben. Von diesen 7 Beurteilungskriterien sind die Kriterien „Quantität an Fach- 
wörtern“ und „Qualität der (Fach-)Sprache“ hervorzuheben. Grund hierfür ist, dass diese 
beiden Beurteilungskriterien eindeutig die sprachliche Realisierung eines Schülerlösungs- 
textes betreffen, diese allerdings von mehreren (aber nicht allen) Teilnehmer _ innen auch 
dazu verwendet wurden um zu begründen, inwieweit sich zwei Schülerlösungstexte hin- 
sichtlich ihrer fachlich-konzeptuellen Qualität voneinander unterscheiden. Dies war insbe- 
sondere bei den fachlich-konzeptuellen Paarvergleichen der Schülerlösungstexte A und C 
der Fall, bei denen eine Mehrheit der Teilnehmer _ innen unter anderem die „Qualität der 
(Fach-)Sprache“ als Beurteilungskriterium heranzog. 
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(retrospektive Befragung) 


Qualitat der sprachlichen 
1. Äußerungen zur 
sprachlichen Realisierung 
(lautes Denken) 
2. positiv vvertende / 
akzeptierende Äußerungen 
(lautes Denken) 
3. negativ wertende/ 
ablehnende Äußerungen 
(lautes Denken) 
4. Punkteverteilung 
(lautes Denken) 
5. Einschätzungen in den 
Paarvergleichen 
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Tabelle 6.35.: Zusammenfassung der Teilbefunde zu Forschungsfrage (F2), die aus der 
quantitativen Analyse der Laut-Denk-Daten, sowie jener der retrospektiven 
Befragungen hervorgingen (bei den angegebenen Prozent- und Punktwerten 
handelt es sich um die entsprechenden Stichprobenmediane, ***:p < .001; 
**.p < .01; *:p < .05). 


6.5.2.2. Quantitative Teilbefunde zur Konfundierung fachlich-konzeptueller und 
sprachlicher Leistungsfeststellung und -beurteilung 


Wie in Tabelle 6.35 dargestellt, konnten in den quantitativen Analysen der in der La- 
borsituation erhobenen Daten insgesamt 5 Teilbefunde gewonnen werden, die für eine 
Konfundierung fachlich-konzeptueller und sprachlicher Schülerleistungen sprechen: 


1. Bei der laut-denkenden Korrektur der Schülerlösungstexte, die sich durch eine ho- 
he fachlich-konzeptuelle Qualität auszeichnen, äußerten sich die Teilnehmer_innen 
im Median (signifikant) hàufiger zur sprachliche Realisierung, als bei den Schüler- 
lösungstexten, die eine geringe fachlich-konzeptuelle Qualitat aufweisen (vgl. Un- 
terabschnitt 6.3.2.5). Hierin zeigt sich ein Hinweis, dass die Teilnehmer  innen eine 
Feststellung und Beurteilung der sprachlichen Realisierung eines Schülerlösungstex- 
tes vor allem dann vornehmen, wenn dieser bis zu einem bestimmten Grad auch 
ihren fachlich-konzeptuellen Erwartungen entspricht. 


2. Der Medianunterschied zwischen den prozentuellen Häufigkeiten positiv werten- 
der/akzeptierender Äußerungen ist bei den Schülerlösungstexten mit geringer fach- 
lich-konzeptueller Qualität deutlich geringer (moderater Fffekt; ES = .34), als zwi- 
schen Schülerlösungstexten mit hoher fachlich-konzeptueller Qualität (starker Ef- 
fekt; ES = .58) (vgl. Unterabschnitt 6.3.2.5). Dies deutet darauf hin, dass die 
Teilnehmer innen während der laut-denkenden Korrektur der Schülerlösungstexte, 
die eine hohe fachlich-konzeptuelle Qualität aufweisen, sprachliche Qualitäten stär- 
ker positiv wertend/akzeptierend berücksichtigten, als bei den Schülerlösungstexten 
mit einer geringen fachlich-konzeptuellen Qualität. 
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3. Der Medianunterschied zwischen den prozentuellen Haufigkeiten negativ werten- 
der/ablehnender Äußerungen ist bei den Schülerlösungstexten mit geringer fachlich- 
konzeptueller Qualität geringer (moderater Effekt; ES = .37), als zwischen Schüler- 
lösungstexten mit hoher fachlich-konzeptueller Qualität (moderater Effekt; ES = 
.42) (vgl. Unterabschnitt 6.3.2.5). Dies deutet darauf hin, dass die Teilnehmer in- 
nen während der laut-denkenden Korrektur der Schülerlösungstexte, die eine hohe 
fachlich-konzeptuelle Qualität aufweisen, sprachliche Mängel stärker negativ wer- 
tend/ablehnend berücksichtigten, als bei den Schülerlösungstexten mit einer gerin- 
gen fachlich-konzeptuellen Qualität. 


4. Der Unterschied zwischen den im Median vergebenen Punkten ist bei den Schü- 
lerlösungstexten mit geringer fachlich-konzeptueller Qualität deutlich geringer (mo- 
derater Effekt; ES = .43), als zwischen Schülerlösungstexten mit hoher fachlich- 
konzeptueller Qualität (starker Effekt; ES = .61) (vgl. Abschnitt 6.3.1). Hierin 
zeigt sich ein Hinweis, dass die Teilnehmer_ innen bei den Schülerlösungstexten mit 
höherer fachlich-konzeptueller Qualität, sprachliche Merkmale in ihrer Punktever- 
gabe stärker berücksichtigten, als bei den Schülerlösungstexten mit einer geringen 
fachlich-konzeptuellen Qualität. 


5. Für die Einschätzungen der Teilnehmer _ innen im Rahmen der fachlich-konzeptuel- 
len und sprachlichen Paarvergleiche ergibt sich eine moderat ausgeprägte Rangkor- 
relation von 7” = .44, die signifikant verschieden von null ist (vgl. Unterabschnitt 
6.4.2.2). Hierbei ist zu beachten, dass die vier Schülerlösungstexte im Rahmen der 
Entwicklungstudie derart ausgewählt wurden, dass ein Wert von r” = .00 theo- 
retisch zu erwarten gewesen wäre, wenn die Teilnehmer innen bei den Paarver- 
gleichen fachlich-konzeptuelle und sprachliche Schülerleistungen nicht miteinander 
konfundieren. 


Zusammengefasst wurden bei der quantitativen Analyse der erhobenen Daten Kennwerte 
für unterschiedliche Facetten der von allen Teilnehmer innen vorgenommenen Leistungs- 
feststellungen und -beurteilungen berechnet bzw. beim Vergleich von Kennwerten Muster 
identifiziert, die sich plausibel als Hinweise auf eine Konfundierung fachlich-konzeptueller 
und sprachlicher Leistungsurteile durch die Teilnehmer _ innen interpretieren lassen. Hin- 
zu kommt, dass die in Tabelle 6.35 angegebenen Kennwerte (Effektstärkemaß ES; Rang- 
korrelationskoeffizient 7*) bzw. Kennwertunterschied (Effektstärkemaß ES) überwiegend 
eine moderate Ausprägung aufweisen. 


6.5.2.3. Quintessenz der Teilbefunde zur Konfundierung fachlich-konzeptueller und 
sprachlicher Leistungsfeststellung und -beurteilung 


Aus einem unmittelbaren Vergleich der in Unterabschnitt 6.5.2.1 und 6.5.2.2 zusammenge- 


führten qualitativen und quantitativen Teilbefunde zu Forschungsfrage (F2) geht folgendes 
hervor: 
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e Auf qualitativer Ebene konnten bei mehreren (aber nicht allen) Teilnehmer_innen 
verschiedene Auffälligkeiten bzw. Muster identifiziert werden, aus denen eine Kon- 
fundierung fachlich-konzeptueller und sprachlicher Leistungsurteile im Rahmen der 
Laborsituation direkt hervorgeht. Mit Hilfe dieser qualitativen Teilbefunde lässt sich 
allerdings keine Aussage darüber treffen, wie ausgeprägt eine derartige Konfundie- 
rung ist. 


e Bei der quantitativen Analyse wurden aus den erhobenen Daten Kennwerte berech- 
net bzw. Kennwertunterschiede identifiziert, die sich plausibel als indirekte Hin- 
weise auf eine Konfundierung fachlich-konzeptueller und sprachlicher Leistungs- 
urteile durch die Teilnehmer _ innen interpretieren lassen. Diese Kennwerte bzw. 
Kennwertunterschiede beziehen sich dabei auf verschiedene Facetten der fachlich- 
konzeptuellen und sprachlichen Leistungsurteilsgenese aller Teilnehmer innen und 
sind überwiegend moderat ausgeprägt. 


Insgesamt lieferte die qualitative und quantitative Analyse der erhobenen Daten also 
eine Vielzahl einander komplementärer Teilbefunde, die auf eine Konfundierung fachlich- 
konzeptueller und sprachlicher Leistungsfeststellung und -beurteilung durch Physiklehr- 
kräfte schließen lassen. Die qualitativen Teilbefunde zeigten sich allerdings nicht bei al- 
len Teilnehmer innen und die quantitativen Teilbefunde bewegen sich überwiegend auf 
mittlerem Niveau. Aus den erhobenen Daten lässt sich daher weder auf eine nicht vorhan- 
dene noch auf eine stark ausgeprägte Konfundierung fachlich-konzeptueller und sprachli- 
cher Leistungsfeststellung und -beurteilung schließen. Vielmehr kann auf Basis der in der 
Hauptstudie gewonnenen Teilbefunde auf eine moderaten Konfundierung der Feststellung 
und Beurteilung fachlich-konzeptueller und sprachlicher Schülerleistungen geschlussfol- 
gert werden. Auch dieser Befund lässt sich mit Hilfe des in Abschnitt 2.2.4 dargestellten 
Rahmenkonzepts einer Assessment Literacy interpretieren: Die vier Schülerlösungstex- 
te, die sich kontrastierend bezüglich ihrer fachlich-konzeptuellen Qualität und/oder der 
Qualität ihrer sprachlichen Realisierung voneinander unterscheiden, stellten für die Teil- 
nehmer innen eine Kontextbedingung dar, die ihren tatsächlichen Handlungsspielraum 
in der Laborsituation mehr oder minder begrenzte. Dementsprechend weist eine mode- 
rate Konfundierung fachlich-konzeptueller und sprachlicher Schülerleistungen durch die 
Teilnehmer innen darauf hin, dass diese... 


.. entweder über kaum kompetenztheoretisch gedachtes Wissen und Können und/oder 
berufsbezogenen Überzeugungen darüber verfügen, wie bzw. dass fachlich-konzeptuelle 
und sprachliche Leistungen getrennt voneinander festgestellt und beurteilt werden kön- 
nen und/oder wie bzw. dass Konfundierungen fachlich-konzeptueller und sprachlicher 
Leistungsurteile vermieden werden können, 


.. oder sie zwar über derartiges kompetenztheoretisch gedachtes Wissen und Können 
und/oder berufsbezogenen Überzeugungen verfügen, es ihnen aber nicht gelingt Kon- 
textbedingungen, die ihren Handlungsspielraum begrenzen, mit zu berücksichtigen, 
weswegen es ihnen in ihrer Logik des Handelns nicht gelingt, Konfundierungen fachlich- 
konzeptueller und sprachlicher Leistungsurteile zu vermeiden. 
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6.6. Zusammenfassung 


Das vorangegangene Kapitel dient der umfassenden Darstellung der empirischen Haupt- 
studie der vorliegenden Arbeit. Dabei wurde sich den Fragen gewidmet, auf welche Res- 
sourcen Physiklehrkràfte bei der Genese fachlich-konzeptueller und sprachlicher Leis- 
tungsurteile über schriftliche, aus einer Klassenarbeit stammenden Schiilerleistungen zu- 
rückgreifen (Forschungsfrage (F1)) und inwieweit bei dieser Genese eine Konfundierung 
fachlich-konzeptueller und sprachlicher Leistungsurteile stattfindet (Forschungsfrage (F2)). 


Zunachst wurde in Unterkapitel 6.1 die heterogene Gelegenheitsstichprobe aus im Schul- 
dienst aktiven Physiklehrkraften, die an der Hauptstudie der vorliegenden Arbeit teilge- 
nommen haben, detailliert beschrieben. Dem folgte eine Erläuterung des Transkriptions- 
und Segmentierungssystems, mit dessen Hilfe die von den Teilnehmern_ Teilnehmerinnen 
erhobenen Verbaldaten aufbereitet wurden (vgl. Unterkapitel 6.2). 


Entsprechend dem Mixed-Methods-Triangulationsdesign zur geplanten Auswertung der 
in der Hauptstudie erhobenen Daten (vgl. Abschnitt 5.4.2) widmeten sich Unterkapitel 
6.3 und 6.4 der qualitativen und quantitativen Analysen der von den Teilnehmer innen 
erhobenen Laut-Denk-Daten, sowie der Daten, die von den Teilnehmern _ Teilnehmerinnen 
in den retrospektiven Befragungen gewonnen wurden. Hierbei erfolgte eine umfassende 
Darstellung des methodischen Vorgehens, der Ergebnisse, der Interpretationen und der 
Limitationen der bei diesen Analysen gewonnenen Teilbefunde. 


Schließlich wurden in Unterkapitel 6.5 die zuvor umfassend beschriebenen qualitativen 
und quantitativen Teilbefunde zu Forschungsfrage (F1) und (F2) in ein kaleidoskopar- 
tiges Gesamtbild zusammengeführt. Die zentralen Teilbefunde zu Forschungsfrage (F1) 
ließen sich dabei zu 6 Ressourcen zur Feststellung und Beurteilung fachlich-konzeptueller 
und sprachlicher Schülerleistungen verdichten, die die Teilnehmer _ innen als bis zu einem 
bestimmten Grad bezüglich fachlich-konzeptueller und sprachlicher Leistungsfeststellung 
und -beurteilung grundgebildet charakterisieren lassen. Bei den 21 Teilnehmer _innen der 
Hauptstudie zeigte sich... 


.. eine Nutzung von Lehrerwissen und -können, dass sich speziell auf die Feststellung 
und Beurteilung fachlich-konzeptueller und/oder sprachlicher Schülerleistungen be- 
zieht (vgl. Unterabschnitt 6.5.1.1). 


.. in Teilen eine holistische Feststellung und Beurteilung schriftlicher Schülerleistungen 
(vgl. Unterabschnitt 6.5.1.2). 


.. ein Handeln auch auf Basis von generalisiertem Wissen und Können und berufsbe- 
zogenen Überzeugungen zu schulischer Leistungsfeststellung und -beurteilung (vel. 
Unterabschnitt 6.5.1.3). 


.. ein Handeln bei der Leistungsurteilsgenese, dass deutlich an der kriterialen Bezugs- 
norm orientiert ist (vgl. Unterabschnitt 6.5.1.4). 
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.. vor allem eine Beachtung fachlich-konzeptueller Merkmale bei der Feststellung und 
Beurteilung schriftlicher Schülerleistungen (vgl. Unterabschnitt 6.5.1.5). Sprachliche 
Merkmale wurden von den Teilnehmer innen (in unterschiedlichem Umfang) zwar 
ebenfalls beachtet, spielten bei der Leistungsfestellung und -beurteilung insgesamt 
aber eine deutlich geringere Rolle (vgl. Unterabschnitt 6.5.1.5). 


.. die Tendenz sprachliche Schülerleistungen defizitorientiert festzustellen und zu beur- 
teilen (vgl. Unterabschnitt 6.5.1.6). Demgegenüber wurden fachlich-konzeptuelle Schü- 
lerleistungen von den Teilnehmer _ innen zum Teil defizitorientiert, in Teilen aber auch 
fähigkeitsorientiert festgestellt und beurteilt (vgl. Unterabschnitt 6.5.1.6). 


Ferner lieferten sowohl die qualitative, als auch die quantitative Analyse der erhobenen 
Daten, zahlreiche, einander komplementäre Teilbefunde, die dafür sprechen, dass die Teil- 
nehmer innen beim Feststellen und Beurteilen schriftlicher Schülerleistungen fachlich- 
konzeptuelle und sprachliche Schülerleistungen auf einem moderaten Niveau miteinan- 
der konfundieren (vgl. Abschnitt 6.5.2). Vor dem Hintergrund des Rahmenkonzepts ei- 
ner Assessment Literacy (vgl. Abschnitt 2.2.4) spricht dieser Befund dafür, dass es den 
Teilnehmer _ innen in der Laborsituation nur bedingt gelungen ist, das Spannungsverhält- 
nis zwischen der kontrastierenden Auswahl der vier Schülerlösungstexte und ihrem Wis- 
sen und Können zur Feststellung und Beurteilung von (fachlich-konzeptuellen und/oder 
sprachlichen) Schülerleistungen und/oder ihren berufsbezogenen Überzeugungen zu schu- 
lischer Leistungsfeststellung und -beurteilung aufzulösen. Auf qualitativer Ebene zeigte 
sich beispielsweise bei mehreren Teilnehmer _ innen die Bewertungslogik fachlich-konzep- 
tuelle Schülerleistungen zu relativieren, wenn gleichzeitig bestimmte Erwartungen be- 
züglich der sprachlichen Realisierung eines Schülerlösungstextes nicht erfüllt waren. Auf 
quantitativer Ebene zeigten sich z. B. Hinweise darauf, dass die Teilnehmer _innen eine 
Feststellung und Beurteilung der sprachlichen Realisierung eines Schülerlösungstextes vor 
allem dann vornehmen, wenn dieser bis zu einem bestimmten Grad auch ihren fachlich- 
konzeptuellen Erwartungen entspricht. 


Alles in allem wurden im Rahmen der empirischen Hauptstudie also zum einen gänzlich 
neue Erkenntnisse gewonnen. Zum anderen wurde in vielerlei Hinsicht der in Teil I der 
vorliegenden Arbeit dargestellte Forschungsstand zu Lehrerwissen und -können zu schuli- 
scher Leistungsfeststellung und -beurteilung und zur Bedeutung von Sprache im Rahmen 
von Leistungsfeststellung und -beurteilung im Physikunterricht weiter gestützt, was im 
folgenden Kapitel noch ausführlich dargestellt wird. Ferner werden im folgenden Kapi- 
tel die Befunde der empirischen Hauptstudie kritisch diskutiert, sowie Konsequenzen für 
zukünftige physikdidaktische Forschung und die Aus- und Weiterbildung von Physiklehr- 
kräften abgeleitet. 
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Im empirischen Teil der vorliegenden Arbeit wurde den folgenden Forschungsfragen nach- 
gegangen: 


(F1) Welche Ressourcen werden von Physiklehrkraften bei schriftlichen, aus einer Klas- 
senarbeit stammenden Schiilerleistungen zur Genese fachlich-konzeptueller und 
sprachlicher Leistungsurteile eingesetzt? 


(F2) Inwieweit findet im Rahmen einer Klassenarbeit bei der Feststellung und Beurtei- 
lung von schriftlichen Schiilerleistungen durch Physiklehrkrafte eine Konfundierung 
fachlich-konzeptueller und sprachlicher Leistungsurteile statt? 


In Summe liefert die empirische Hauptstudie (vgl. Kapitel 6) reichhaltige Befunde zum 
bislang wenig erforschten Handeln von im Schuldienst aktiven Physiklehrkraften beim 
Feststellen und Beurteilen schriftlicher Schülerleistungen. Insbesondere ist es gelungen, 
empirische Evidenz zu gewinnen, die dafür spricht, dass Physiklehrkräfte bei der Genese 
von Leistungsurteilen fachlich-konzeptuelle und sprachliche Schülerleistungen auf einem 
moderaten Niveau miteinander konfundieren. Das folgende Kapitel hat zum Ziel, Limi- 
tationen des empirischen Teils der vorliegenden Arbeit zu diskutieren und Konsequenzen 
der gewonnenen Befunde für zukünftige physikdidaktische Forschung, sowie die Aus- und 
Weiterbildung von Physiklehrkräften abzuleiten. 


7.1. Limitationen der empirischen Hauptstudie 


Das Vorgehen in der empirischen Hauptstudie folgte einem deskriptiv-explorativen Stu- 
diendesign (vgl. Unterkapitel 4.2). Zuvor wurde in einer eigens hierfür angelegten Ent- 
wicklungsstudie geklärt, welches methodische Vorgehen sowohl zu den Forschungsfragen 
(F1) und (F2), als auch zu den Eigenschaften des Untersuchungsgegenstands passgenau 
ist und eine Verbindung zwischen Forschungsfragen und Untersuchungsgegenstand ermög- 
licht (vgl. Kapitel 5). Aus dem gewählten methodischen Vorgehen ergeben sich zwangs- 
läufig auch Grenzen. Spezifische Limitationen der einzelnen qualitativen und quantita- 
tiven Teilanalysen wurden an entsprechender Stelle bereits erörtert (vgl. Unterabschnitt 
6.3.1.4, 6.3.2.3, 6.3.2.4, 6.3.2.5, 6.4.1.4 und 6.4.2.2). Auf eine erneute Darstellung dieser 
Limitationen wird in diesem Unterkapitel daher verzichtet. Stattdessen beschränkt sich 
die Darstellung auf Limitationen, die den Untersuchungsgegenstand des empirischen Teils 
der vorliegenden Arbeit betreffen. Diese Limitationen sind für eine kritische Betrachtung 
des empirischen Teils der vorliegenden Arbeit von zentraler Bedeutung. Grund hierfür 
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ist, dass die analysierten Daten in einer vergleichsweise kleinen Gelegenheitsstichprobe 
erhoben wurden und damit die Ubertragbarkeit der gewonnenen Befunde in besonderem 
Maße davon abhängig ist, inwieweit sich die Merkmale des Untersuchungsgegenstands der 
vorliegenden Arbeit auch im angestrebten Übertragungskontext wiederfinden. 


Zunächst sind die Limitationen zu benennen, die aus der Stichprobenziehung resultieren. 
In der Hauptstudie wurde eine heterogene Gelegenheitsstichprobe von N = 21 Hamburger 
Physiklehrkräften gewonnen (vgl. Unterkapitel 6.1). Die Heterogenität dieser vergleichs- 
weise kleinen Stichprobe begünstigte die Datenauswertung im Rahmen der Hauptstu- 
die, da hierdurch unterschiedlichste Ressourcen von Physiklehrkräften zur Feststellung 
und Beurteilung fachlich-konzeptueller und sprachlicher Schülerleistungen (Forschungs- 
frage (F1)), sowie zahlreiche empirische Hinweise, die für eine Konfundierung fachlich- 
konzeptueller und sprachlicher Leistungsurteile von Physiklehrkräften sprechen (For- 
schungsfrage (F2)), identifiziert werden konnten. Gleichzeitig weist die gewonnene Ge- 
legenheitsstichrobe eine gewisse Homogenität auf, aus der sich die folgenden Limitationen 
ergeben: 


1. Alle Teilnehmer _innen waren zum Erhebungszeitpunkt in der Freien und Hanse- 
stadt Hamburg im Schuldienst tätig. Die in der Hauptstudie gewonnenen Befunde 
beziehen sich also auf Physiklehrkräfte, deren tägliche Arbeit — insbesondere auch 
ihre Umsetzung von schulischer Leistungsfeststellung und -beurteilung — von den 
schulpolitischen Vorgaben, schulkulturellen Gepflogenheiten und gesellschaftlichen 
Rahmenbedingungen des Bildungssystems eines bestimmten Stadtstaates und Bun- 
deslandes festgelegt und/oder beeinflusst wird. Die Befunde der Hauptstudie sind 
daher nicht zwangsläufig auf Physiklehrkräfte übertragbar, die beispielsweise in an- 
deren Bundesländern oder in eher ländlichen Regionen im Schuldienst aktiv sind. 


2. In Bezug auf Forschungsfrage (F2) spricht die Assessment Literacy Konzeption 
aus Abschnitt 2.2.4 dafür, dass es einen kritischen Variationsbereich gibt, inner- 
halb dessen sich das Wissen und Können, sowie die berufsbezogenen Überzeugun- 
gen von Physiklehrer innen zu schulischer Leistungsfeststellung und -beurteilung 
in einer Konfundierung fachlich-konzeptueller und sprachlicher Schülerleistungen 
niederschlagen (vgl. auch Unterabschnitt 6.5.2.3). Liegt daher das Wissen und Kön- 
nen, sowie die berufsbezogenen Überzeugungen von Physiklehrkräfte nicht (bzw. 
nur zum Teil) in diesem kritischen Bereich, so ist auch keine (bzw. nur teilwei- 
se eine) Konfundierung fachlich-konzeptueller und sprachlicher Teilleistungsurtei- 
le durch die Physiklehrkräfte zu erwarten (vgl. Renkl, 1993, S. 119). Da sich die 
Stichprobengewinnung in der Hauptstudie aus unterschiedlichen Gründen als recht 
schwierig darstellte (für Details vgl. Unterkapitel 6.1) und die befragten Physik- 
lehrkräfte — wenn auch nur in sehr schwacher Tendenz — eine subjektiv eher hoch 
empfundene Diagnosesicherheit aufweisen (vgl. Abschnitt 6.1.2), handelt es sich bei 
der gewonnenen Gelegenheitsstichprobe möglicherweise jedoch um eine Positivaus- 
wahl von Physiklehrkräften in Bezug auf ihr Wissen und Können, sowie ihren be- 
rufsbezogenen Überzeugungen zu schulischer Leistungsfeststellung und -beurteilung. 
Es kann daher nicht ausgeschlossen werden, dass der Befund einer Konfundierung 
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fachlich-konzeptueller und sprachlicher Schülerleistungen durch Physiklehrkrafte auf 
einem „lediglich“ moderaten Niveau auch darauf zurückgeführt werden kann, dass 
die Wissens- und Könnensbestände und die berufsbezogenen Überzeugungen der 
Teilnehmer innen nur zum Teil in einem kritischen Bereich variieren. 


Daneben sind Limitationen zu benennen, die aus der Ausgestaltung der Datenerhebung 
im Rahmen der Hauptstudie hervorgehen. Diese erfolgt in einer Laborsituation mit kon- 
trolliertem Ablaufplan (vgl. Abschnitt 5.4.1). Das ökologische Validitätskriterium, dass 
die Laborsituation mit der Alltagspraxis von Physiklehrer_innen bei der Leistungsfest- 
stellung und -beurteilung im Rahmen einer Klassenarbeit kongruieren soll, wurde in der 
Entwicklungsstudie in besonderem Maße berücksichtigt (vgl. Abschnitt 5.2.2). Allerdings 
ist es allein aufgrund des Umstands, dass die Befragung in einer Laborsituation stattfand, 
möglich, dass hierdurch das Handeln der Teilnehmer innen beeinflusst und/oder verän- 
dert wurde (vgl. von Aufschnaiter, 2014, S. 85). Hinzu kommen die folgenden besonderen 
Merkmale der Laborsituation, die die Übertragbarkeit der in der Hauptstudie gewonnenen 
Befunde beschränken: 


3. Die Teilnehmer innen wurden in der Laborsituation gebeten zu einer bestimmten 
Klassenarbeitsaufgabe — die Aufgabe Weltraumspaziergang — entsprechend ihrer täg- 


lichen Berufspraxis einen Erwartungshorizont zu erstellen und zugehörige Schülerlö- 
sungstexte zu korrigieren (vgl. Abschnitt 5.4.1). Die in der Hauptstudie gewonnenen 
Befunde sind daher nicht zwangsläufig auf Klassenarbeitsaufgaben, die beispielswei- 
se andersartige curriculare Inhalte und/oder Kompetenzbereiche von Schüler _ innen 
abprüfen, übertragbar. 


4. Klassenarbeiten bestehen im Schulalltag meist nicht aus einer einzigen sondern aus 
einer Vielzahl unterschiedlicher Aufgaben. In der Laborsituation werden die Teil- 
nehmer innen allerdings lediglich gebeten, sich in die Situation hineinzuversetzen, 
die Aufgabe Weltraumspaziergang in einer Klassenarbeit der 9. Jahrgangsstufe als 
Grundwissensaufgabe eingesetzt zu haben (vgl. Anhang C.1 Aufgabenheft für Phy- 
siklehrkräfte, S. 2). Die konkrete Ausgestaltung dieser Klassenarbeit, z. B. welche 
weiteren Aufgaben gestellt wurden, wurde nicht weiter spezifiziert. Damit sind aber 
die in der Hauptstudie gewonnenen Befunde insofern limitiert, als dass die Einbet- 
tung einer bestimmten Aufgabe in eine Klassenarbeit als mutmaßlicher Einfluss- 
faktor auf die Feststellung und Beurteilung fachlich-konzeptueller und sprachlicher 
Schülerleistungen durch Physiklehrkräfte in der Ausgestaltung der Laborsituation 
wenig berücksichtigt ist. 


5. Wie in Unterabschnitt 6.3.2.1 dargestellt, zeigten sich in den Selbstauskünften der 
Teilnehmer _ innen Hinweise auf reaktive Effekte durch die Erhebungsmethode des 
lauten Denkens. Auch wenn diese Hinweise geringfügig und nur bei vier Teilneh- 
mer innen 